iPhone Agent Harness

5天前发布 14 00

iPhone Agent Harness使用低成本ESP32开发板做蓝牙硬件桥,搭配iPhone Safari,借助WebRTC通信,让AI智能体靠自然语言指令操控iPhone,可读屏、输入、跨App执行任务;网页端一键烧录固件,手机无需越狱,ESP32-C3即可入门。

所在地:
cccat6
收录时间:
2026-10-23
iPhone Agent HarnessiPhone Agent Harness

iPhone Agent Harness 是一套硬件+网页方案,用来让AI智能体直接自动操作iPhone。用户用自然语言下达指令,智能体可完成屏幕读取、文字输入、控件调节,或是跨App执行完整任务流程,例如自动在iPhone设置闹钟。

iPhone Agent Harness

整套架构与工作原理

  1. iPhone端:打开Safari浏览器,Safari负责采集屏幕画面、承载对话界面,调度AI模型。
  2. 硬件桥:ESP32开发板通电,充当蓝牙键鼠设备;手机与ESP32接入同一Wi‑Fi局域网。
  3. 执行链路:Safari把屏幕画面上下文传给AI;AI输出动作计划,Harness校验动作,经由局域网WebRTC下发指令到ESP32;ESP32通过蓝牙模拟键鼠,向iPhone发送点击、输入等操作;之后Safari再次采集屏幕,校验任务执行结果,形成闭环。

硬件与烧录

入门成本极低,ESP32-C3(约2美元)即可搭建。

  • 烧录入口:https://igent.cc/flash,在Chrome/Edge浏览器里,USB连接开发板,网页内直接选择芯片型号刷写固件,无需额外工具。
  • 支持芯片列表:ESP32-C2、ESP32-C3、ESP32-C5、ESP32-C6、ESP32-S3、经典ESP32;C3/C5/C6/S3/原版ESP32固件要求SPI闪存至少4MB。

使用特点

  • 手机无线:ESP32硬件桥通电放置即可,只需要维持在iPhone蓝牙覆盖范围,手机不用插线。
  • 共用现有Wi‑Fi:手机与ESP32连同一局域网,仅需打开Safari页面就启动任务。
  • 无需越狱:依靠蓝牙HID键鼠输入+Safari屏幕采集,不要求iPhone越狱。

相关导航