onehumanbeing/esp32-iphone-agent
把一块约 7 美元的 ESP32 变成 AI 的「眼睛和手」：通过 AirPlay 读取 iPhone 屏幕，再用 USB HID 模拟点击和滑动，让任意兼容 OpenAI 的视觉模型操作真实 iPhone。不需要 Mac、开发者账号或越狱。适合愿意动手刷固件、想让 AI 代跑手机 App 流程的开发者。
这个项目是什么
用 ESP32 同时桥接 AirPlay 画面与 USB HID 输入，让视觉模型操作 iPhone 的开源固件。
能用来做什么
- 让视觉模型自动操作手机 App 完成重复点击流程
- 在无 Mac 环境下做 iOS 界面自动化回归
- 跨境卖家批量处理手机端店铺与社媒操作
- 给自建 AI Agent 接一块真实手机当执行端
- 采集真机界面截图交给模型识别异常
上手条件
普通人
需要技术背景
图形界面
没有图形界面
部署
需要自己部署
API Key
需要
成本：硬件为一次性约 7 美元的 ESP32 板卡；持续成本主要是视觉模型上传截图的 token 费用，换自托管模型可压低，另需线材等杂项。
能接入：定位是硬件执行端，可包一层本地 API 或 MCP 工具交给 Agent 循环、n8n 等编排调用；材料未说明有官方集成。
软件开发：无 Mac 的 iOS UI 自动化测试电商：手机端店铺与 App 重复操作代跑短视频：手机端浏览与互动流程自动化办公：手机 App 表单填写与消息处理内容创作：真机界面截图与操作演示采集
商业方向与限制
可以怎么变现：可做预刷固件的硬件套件加手机自动化脚本模板，或为跨境团队提供真机 Agent 的部署与流程定制服务；收入取决于交付人力，不宜承诺规模。
限制：MIT 许可证；本次未取到 README，安装步骤、AirPlay 配对稳定性和维护状态均无法核实，Star 数不能替代验证；需要刷机与物理 USB 连接，iOS 自动化还可能触及平台条款。
手机自动化硬件桥接AI AgentESP32
Star 历史
13 个快照2026-10-182026-10-20
页面上的中文判断由模型基于仓库信息与 README 生成，会标注不确定性；Star 与许可证等事实来自 GitHub 官方 API。发现分析有误可以在后台重新分析该仓库。