esp32-iphone-agent

这款iPhone自动化代理用ESP32-S3接收屏幕并模拟USB鼠标和键盘,让视觉AI模型无需Mac即可操作真实iPhone。

查看公开 issue

挑一个能复现的小 issue,用 AI 编程助手把它修好。

分享到 X许可证: MIT

概述

ESP32 iPhone Agent让视觉AI模型通过ESP32-S3板卡操作真实iPhone,无需Mac、开发者账户或越狱。板卡创建Wi-Fi热点并接收iPhone的AirPlay画面,同时作为USB鼠标和键盘;iPhone应用解码画面、将截图发送给兼容OpenAI接口的视觉模型,并执行点击、滑动和输入。每次运行都可回放和导出以供检查。

主要特点

  • 创建Wi-Fi热点并接收iPhone的AirPlay画面,通过低功耗蓝牙转发给应用。
  • 作为USB鼠标和键盘运行,通过AssistiveTouch控制iPhone。
  • iPhone应用将截图发送给兼容OpenAI接口的视觉模型,并执行点击、滑动和输入等操作。
  • 保留运行记录,支持逐步回放以及导出截图、操作和注释。

适用场景

适合希望借助ESP32-S3和视觉模型自动操作真实iPhone、又不使用Mac的人,也适合需要回看或导出运行记录的场景。

上游仓库
onehumanbeing/esp32-iphone-agent
GitHub 上的 fork
Guo-astro/esp32-iphone-agent
上游 Star 数
776
分类
AI 智能体与大模型工具
编程语言
C
许可证
MIT
Fork 时间
2026-10-12
同步状态
上次同步已更新上次同步 2026-10-20