我让 AI 替我刷了趟微信朋友圈,还顺手点了份外卖

我让 AI 替我刷了趟微信朋友圈,还顺手点了份外卖

iPhone Use 在 Codex 中操作真实 iPhone 并实时展示手机屏幕

上周五下班路上,我对着手机屏幕发了会儿呆:微信朋友圈 47 条新动态、美团外卖还没点、小红书草稿箱里躺着三篇没发的笔记。

这些事,每一件都要我手动点开 App、滑半天、一个个操作。

然后我看到了一个叫 iPhone Use 的开源项目——让 Codex 直接通过 USB 操作我的真实 iPhone。3668 颗星,开源 8 天。

我决定试试。

一句话说清它是什么

iPhone Use 是一个开源工具,让 Codex、WorkBuddy 或豆包工作通过 USB 数据线,直接操作你手里的真实 iPhone。

不是模拟器,不是屏幕镜像,是真的在操作你的手机——打开 App、读取页面、点击、滑动、输入文字,全程在侧边栏实时显示手机屏幕。

底层用的是 Appium 维护的 WebDriverAgent(WDA),跑在手机上的执行服务。无需越狱,无需单独启动 Appium Server。

我让它干了三件事

1. 刷微信朋友圈并总结

我给它发了一句:"打开我的微信朋友圈,看看朋友们国庆都去哪玩了。"

它打开微信 → 进入朋友圈 → 逐条读取 → 26 秒后,给我整理了一份"朋友们国庆出游地图"。

2. 点美团外卖

"帮我看看附近有什么吃的,点一份之前常点的。"

它打开美团 → 搜索 → 读取列表 → 选好 → 停在支付确认页等我确认。

3. 发小红书

"把这篇笔记发到小红书,仅自己可见。"

打开小红书 → 进入草稿 → 填好内容 → 发布。全程我没碰手机。

它凭什么能做到

iPhone Use 把四样东西拼在了一起:

手机端执行服务(WDA)——跑在 iPhone 上,负责真正执行操作。

本地 MCP 工具——让 Codex 能调用"打开 App""点击""滑动""输入"这些能力。

安装使用 Skill——引导 Codex 完成首次安装:设备发现、签名、构建、启动,一条提示词搞定。

实时屏幕预览——侧边栏实时显示手机画面,你能看到 AI 正在干什么。

几个让我意外的细节

操作过程全程可见:不是黑箱操作,侧边栏实时显示手机屏幕,你能看到它每一步在干什么。近期更新还支持直接点击预览画面、鼠标拖动、触控板双指滚动。

截图兜底:手机页面控件信息不全时,它会自动截图,让模型看实际画面再判断点击位置。遇到遮挡、滚动没进展、输入不符,也会通过截图重新确认状态。

长文本输入不怕断:支持 Unicode 文字,长文本分段输入还能续传。续传有上下文保护——切换 App 或输入框焦点变了就停止,保留已输入内容,不会误写。

已配置的设备能复用:首次安装要处理依赖、签名、构建,但之后会优先复用已有配置和连接,不用每次从头装。

安装比你想的简单

前提:一台 Mac(装完整 Xcode)+ 一部 USB 连接的 iPhone + Codex CLI(或 WorkBuddy / 豆包工作)。

然后,把项目 README 里那段安装提示词复制给 Codex:

请帮我安装和配置 iPhone Use:https://github.com/zhongerxin/iPhone-use 先读取仓库 README 和安装脚本,检查本机 Codex CLI、Python、Node.js、npm、完整 Xcode,以及通过 USB 连接的 iPhone。把项目放到合适的本机目录,运行 sh scripts/install.sh 安装插件……

Codex 会自己完成设备发现、签名配置、WDA 构建和启动。需要你手动操作的(Apple 登录、设备信任、开发者模式、解锁),它会明确告诉你步骤。

几个值得知道的事(不是劝退,是攻略)

必须 Mac + 完整 Xcode:Command Line Tools 不够,要能编译 WDA。这是硬门槛,但也是它稳定性的来源。

操作微信有风险:和苹果自带屏幕镜像类似,高频操作微信可能被警告。建议微信相关操作控制频率,别拿它批量刷。

密码、Face ID、支付确认得自己点:这是设计如此——认证环节交给用户,AI 只做它该做的。安全边界清晰。

免费开发者账号 7 天重签一次:免费签名有效期 7 天,到期要重签。如果你有付费开发者账号($99/年),就不用管这个。

仓库目前是私有:README 里写明"仓库目前为私有,需要有 GitHub 访问权限"。想用的朋友,先关注作者 zhongerxin 拿到访问权限。

谁该用

  • iPhone 用户 + AI 编程玩家:这是目前让 AI 操控 iPhone 最顺的方案
  • 想自动化手机操作的人:刷朋友圈总结、比价、点外卖、发小红书,这些重复操作交给 AI
  • WorkBuddy / 豆包工作用户:这两个宿主也支持,不用装 Codex CLI

最后

iPhone Use 让我第一次觉得,"AI 操控手机"不再是演示视频里的概念,而是真能替我干活的工具。

它不完美——要 Mac、要 Xcode、微信要悠着点。但 3668 颗星、8 天、MIT 协议,这个项目的潜力已经摆在那了。

项目地址:https://github.com/zhongerxin/iPhone-use


相关链接:

评论

暂无评论。

登录后可发表评论。