'commit'

WeiXin/T4_InputLlmText.py

@@ -11,7 +11,7 @@ project_root = os.path.dirname(os.path.dirname(os.path.abspath(__file__)))
 if project_root not in sys.path:
     sys.path.append(project_root)
 
-from WeiXin.WxUtil import find_input_box_center, perform_input_action, analyze_chat_image, clean_screenshots_dir
+from WeiXin.WxUtil import find_input_box_center, perform_input_action, analyze_chat_image, clean_screenshots_dir, is_in_chat_interface
 from Util.LlmUtil import get_llm_response
 
 # 配置日志
@@ -39,6 +39,11 @@ async def generate_and_input():
         # 1. 连接设备
         d = u2.connect()
         logger.info(f"设备连接成功: {d.info.get('serial')}")
+
+        # 检查界面状态
+        if not is_in_chat_interface(d):
+            logger.error("🚫 当前不在微信聊天界面，任务终止")
+            return
         
         # 2. 截图并识别对话历史
         screenshot_dir = os.path.join(os.path.dirname(os.path.abspath(__file__)), "Screenshots")
@@ -51,6 +56,13 @@ async def generate_and_input():
         analyzed_shot = os.path.join(screenshot_dir, "t4_temp_history_analyzed.jpg")
         dialogue_log = analyze_chat_image(tmp_shot, analyzed_shot)
         
+        # 语音转文字处理
+        if dialogue_log == "VOICE_CONVERTING":
+            logger.info("检测到语音正在转文字，等待 3 秒后重新截图分析...")
+            await asyncio.sleep(3)
+            d.screenshot(tmp_shot)
+            dialogue_log = analyze_chat_image(tmp_shot, analyzed_shot)
+        
         history_text = ""
         if dialogue_log:
             history_text = "\n".join(dialogue_log)
@@ -61,25 +73,27 @@ async def generate_and_input():
 
         # 3. 调用 LLM 生成回复
         persona = (
-            "你是一名99年毕业，有27年教学经验的小学高级教师，大张老师。你在长春市少惠林作文素养培养中心工作，"
-            "校区真实地址就在：长春市南环城路与临河街交汇的TOUCH12街3楼325号。你对作文批阅不下20000个，"
-            "非常熟悉小学阶段、初二以前的初中阶段作文教学。你是一位深受家长和学生信任的教育智者，"
-            "回复时要既专业又充满亲和力，像老朋友交流一样自然、温暖。严禁使用‘1. 2. 3.’或‘首先、其次、最后’等生硬、刻板的列条目回复。"
-            "要善于用富有经验的话语疏导家长的焦虑，并给出有深度、可操作的详细指导。语言要生动、形象，多用比喻或实例，展现岁月沉淀的智慧。"
-            "如果涉及到校区信息，必须使用以下真实数据，绝对严禁使用'XX区'、'XX路'、'XX号'等占位符：\n"
-            "1. 校址：长春市南环城路与临河街交汇的TOUCH12街3楼325号\n"
-            "2. 课程：线上和线下作文课、假期读书营、阅读策略营\n"
-            "3. 上课时间：周二/周四晚上，以及周六周日全天\n"
-            "4. 联系人：小张老师\n"
-            "5. 电话：18686619970"
+            "你是一名1999年毕业、拥有27年一线教学经验的小学高级教师，名叫‘大张老师’。你目前在‘长春市少惠林作文素养培养中心’工作。"
+            "你不仅是一位作文教学专家，批阅过超过2万篇作文，更是一位懂得孩子心理、能与家长共情的教育智者。"
+            "你的回复风格应该是：温厚、亲切、睿智且极具亲和力，就像一位老邻居、老大哥在和家长坐在长椅上聊天。"
+            "严禁使用任何列表格式（如 1. 2. 3. 或 A. B. C.），严禁使用‘首先、其次、最后’等刻板的逻辑词。"
+            "要用连贯、优美、富有生活气息的文字进行叙述。每一句话都要带温度，要善于用‘咱们孩子’、‘作为老师我也理解’等词汇拉近距离。"
+            "回复内容要有深度，不要只给结论，要讲透背后的教育逻辑。字数必须严格控制在 100-200 字之间。"
+            "如果涉及到校区信息，必须且只能使用以下真实数据，绝对严禁使用任何占位符：\n"
+            "- 单位：长春市少惠林作文素养培养中心\n"
+            "- 地址：南环城路与临河街交汇，TOUCH12街3楼325号\n"
+            "- 联系人：小张老师（电话：18686619970）\n"
+            "- 课程：线上/线下作文课、读书营/阅读策略营（假期开设）\n"
+            "- 上课：作文通常在周二/周四晚上，周六/周日全天"
         )
         prompt = (
-            f"人设：{persona}\n\n"
-            f"以下是微信聊天记录（'对方'和'我'的对话）：\n{history_text}\n\n"
-            "请作为大张老师，针对最后的消息给出一个充满关怀、有深度且专业的回复。回复要亲切自然，"
-            "字数控制在 150-250 字之间，不要分点列项，而是用连贯的段落叙述。要把方法讲透，把道理讲细，"
-            "让家长感受到你作为老教师的温度和沉淀。如果提到地址、电话或课程，必须使用人设中提供的真实信息，"
-            "严禁出现任何 'XX' 形式的占位符。直接输出回复内容。"
+            f"【教师人设】：{persona}\n\n"
+            f"【近期聊天记录】：\n{history_text}\n\n"
+            "【任务要求】：\n"
+            "请作为大张老师，给家长写一段暖心且有深度的回复。要针对家长最后提到的问题或状态，先给予情感上的安抚和理解，"
+            "然后再结合你27年的教学经验，给出具体的建议。建议要讲得细致、感人，展现出老教师的智慧沉淀。"
+            "全文必须是一个或两个完整的自然段，绝对禁止分点列项！字数严格在 100-200 字之间。"
+            "如果需要提供联系方式或地址，请自然地揉进段落中，严禁出现'XX'占位符。直接输出回复的正文内容，不要包含任何多余的修饰词或引号。"
         )
         logger.info(f"正在以'亲切而专业的特级教师'身份请求 LLM 生成深度回复...")
         
@@ -97,23 +111,15 @@ async def generate_and_input():
         # 4. 识别输入框位置
         center_point, rect_box = find_input_box_center(tmp_shot)
         
-        if center_point:
-            cx, cy = center_point
-            logger.info(f"识别到输入框中心: ({cx}, {cy})")
-            
-            # 5. 点击输入框并输入文字并发送
-            # 使用 WxUtil 中的 perform_input_action
-            # 该函数内部会先点击坐标，然后输入内容
-            # 设置 auto_send=True，输入文字后点击发送
-            logger.info(f"正在点击输入框并输入文字并发送: {llm_text}")
-            success = perform_input_action(d, center_point, llm_text, auto_send=True)
-            
-            if success:
-                logger.info("✅ T4 执行完成：文字已成功输入并点击发送。")
-            else:
-                logger.error("❌ T4 执行失败：输入动作未成功完成。")
+        # 5. 执行输入动作
+        # 即使 center_point 为 None，perform_input_action 也会尝试通过原生控件识别输入框
+        logger.info(f"正在准备输入回复内容...")
+        success = perform_input_action(d, center_point, llm_text, auto_send=True)
+        
+        if success:
+            logger.info("✅ T4 执行完成：文字已成功输入并点击发送。")
         else:
-            logger.error("❌ T4 执行失败：未能识别到输入框位置。")
+            logger.error("❌ T4 执行失败：输入动作未成功完成。")
             
     except Exception as e:
         logger.error(f"❌ T4 执行出错: {e}", exc_info=True)