原生手机 App屏幕操作 Agent

ESP32 iPhone Agent / Handsy

原生 iPhone Agent:板端接收 AirPlay,USB 键鼠执行操作。

这个项目做什么

Henry Yuan 的项目把 Agent 循环放在 iPhone 上。已核对的公开源码由 ESP32-S3 接收 AirPlay,将视频转给 App,并通过 USB 发送输入。

限制与验证范围

AirPlay 投屏源必须是 iPhone,不支持 macOS 镜像。核对版本新增无视频诊断,不是 Mac 支持;视频仍走 BLE,另行宣布的 Wi-Fi 视频版未包含在内。竖屏与 ASCII 输入仍有限制,本站未做硬件实测。

核对来源

已核对的 READMEd986bed阅读本站的 ESP32 iPhone Agent 搭建笔记
硬件
带 PSRAM 和原生 USB 的 ESP32-S3
运行位置
iPhone App;电脑用于构建与签名
画面或声音观察
AirPlay → ESP32-S3 → BLE → App
输入链路
USB HID 鼠标与键盘
搭建条件
iOS 18+、Xcode、Arduino 固件与视觉模型接口
许可信息
MIT; AirPlay components GPL-3.0