在 macOS 上通过截图 + Agent 视觉识别的方式,读取微信联系人或群组的聊天记录。
screencapture 需要)brew install cliclick)一条命令完成联系人定位 + 聊天截图:
bash
bash scripts/wechat_read.sh "<联系人>" [--pages N]
text
【步骤 1】快速定位 (≈4.5s)
激活微信 → 设置窗口 → Cmd+F → 粘贴联系人 → Enter(乐观假设)
↓
【步骤 2】验证联系人 (≈0.7s)
截图标题栏 → Swift Vision OCR → 判断是否进入了正确聊天窗口
↓
【步骤 3】决策分支
├─ 验证通过 (≈99.5%) → 截图聊天记录 ✅
└─ 验证失败 (≈0.5%) → 精确定位降级 ↓
↓
降级路径 (≈3.5s)
ESC → 重新搜索 → 截图下拉框 → 退出(exit 2)
⚠️ 脚本以 exit code 2 退出,Agent 需要接管:
1. 读取 /tmp/wechat_read_search.png
2. 找到目标联系人行的屏幕坐标
3. 调用 --capture 模式截图
截图保存至 /tmp/wechat_read_verify_title.png,OCR 识别标题栏文字后按优先级判断:
⚠️ 排除法必须优先执行(搜索框内本身含联系人名):
"网络查找" / "查找微信号" / "搜索网络结果" → ❌ 失败(确认在搜索结果页)Code含义Agent 动作0截图成功分析截图1致命错误报告错误2降级退出读取截图 → 识别坐标 → 调用 --capture3已到顶(--next-page)停止,报告未找到
当脚本以 exit 2 退出时,Agent 应:
bash
# 1. 读取截图(脚本已输出路径)
# /tmp/wechat_read_search.png
# 2. 分析截图,找到目标联系人行的屏幕坐标 (x, y)
# 坐标换算:截图区域起始于 (50, 50)
# 屏幕坐标 = (50 + 截图像素x, 50 + 截图像素y)
# 3. 调用 --capture 完成截图
bash scripts/wechat_read.sh "<联系人>" --capture <x>,<y> [--pages N]
仍保留原始两阶段流程,适用于需要完全手动控制的场景:
bash
bash scripts/wechat_read.sh "<联系人>" --enter
执行:激活微信 → 设窗口 → Cmd+F 搜索 → 截图保存至 /tmp/wechat_read_search.png
Agent 操作:读取截图,找到正确联系人行的屏幕坐标 {x, y}。
坐标换算:截图区域起始于 (50, 50),屏幕坐标 = (50 + 截图像素x, 50 + 截图像素y)。
bash
bash scripts/wechat_read.sh "<联系人>" --capture <x>,<y> [--pages N]
点击联系人进入会话,等待聊天加载,然后逐页截图聊天记录。通过 cliclick 点击目标坐标进入聊天窗口。
key code 116(PgUp)向上滚动/tmp/wechat_read_p1.png、 /tmp/wechat_read_p2.png……--pages N 指定页数滚动终止检测:对每张截图计算 MD5 校验值。若连续两张截图完全相同(页面未变化),则判定已到达聊天顶部,自动停止,并输出 [REACHED_TOP] 标记。
Agent 操作:读取所有截图( /tmp/wechat_read_p1.png 至 pN.png),然后:
微信聊天界面布局规则:
位置含义气泡颜色右侧****我方发出的消息绿色气泡左侧****对方发来的消息白色/灰色气泡底部****最新消息—顶部****最旧消息—
关键逻辑:
常见错误(禁止):
当最新一屏全是我方(右侧绿色)消息,找不到对方回复时,使用 --next-page 模式逐页向上翻找:
bash
# 第一页已截,分析后发现全是我方消息,继续向上翻
bash scripts/wechat_read.sh "大号" --next-page 2
# → 截取第2页,保存 /tmp/wechat_read_p2.png
# → Agent 分析:有左侧白色气泡?有 → 停止;没有 → 继续
bash scripts/wechat_read.sh "大号" --next-page 3
# → 截取第3页,保存 /tmp/wechat_read_p3.png
# → 如此循环直到找到对方消息或到达聊天顶部
Code含义Agent 动作0截图成功分析截图3已到顶(与上一页相同)停止,报告未找到
bash
# 自动模式:快速定位 → 验证 → 截图(默认 3 页)
bash scripts/wechat_read.sh "联系人"
# → 自动完成:快速定位 → 验证 → 截图 (≈6s)
# → 若验证失败:exit 2,Agent 读截图后调用 --capture
# 自动模式:指定页数
bash scripts/wechat_read.sh "联系人" --pages 10
bash
# 第一阶段
bash scripts/wechat_read.sh "微信联系人" --enter
# → Agent 读取 /tmp/wechat_read_search.png,找到联系人坐标 (200, 210)
# 第二阶段:截取 3 页(默认)
bash scripts/wechat_read.sh "微信联系人" --capture 200,210
bash
# 截取 10 页
bash scripts/wechat_read.sh "微信联系人" --capture 200,210 --pages 10
bash
# 最多截取 50 页,到顶自动停止
bash scripts/wechat_read.sh "微信联系人" --capture 200,210 --pages 50
(370, 90, 830, 620),基于窗口位置 {50,50}、尺寸 {1200,800}。若微信窗口布局变化,需重新校准。SCROLL_STEPS。{50,50},尺寸 {1200,800}。维度v1.0 两阶段v2.0 自动验证联系人定位Agent 看截图选坐标自动 Enter + OCR 验证耗时(正常)20-30s(含思考)≈6s耗时(降级)—≈9s + Agent 识别验证机制无标题栏 OCR误读风险有零(验证兜底)Agent 参与必须仅 0.5% 降级时
以下参数为基于标准微信 macOS 布局(窗口位置 {50,50},尺寸 {1200,800})的固定值。若截图区域偏移,请测试并调整:
参数当前值控制内容CHAT_RECT``370,90,830,620聊天内容区截图范围(x, y, 宽, 高)SCROLL_STEPS``1每次翻页 PgUp/PgDown 次数(1次=1屏)SCROLL_DELAY``0.05每次按键之间的等待时间(秒)POST_SCROLL_WAIT``0.6滚动后截图前的等待时间(秒)CLICK_FOCUS_POS``750,400截图前点击聚焦聊天区域的坐标