観測と入力を分ける
マウス操作のブリッジが画面取得やモデル実行まで行うとは限りません。Anan iPhone Useはそれらをクライアントに任せています。
ARCHITECTURE / COMPARISON
異なる方式を、並べて見る。
観測から実行までの経路を比較します。すべてのESP32基板やiPhoneエージェントが置き換え可能なわけではありません。
チップとOSを確認する
classic ESP32のHFP音声、S3のネイティブUSB、C3のBluetooth入力は用途が違います。アプリごとにOS条件も異なります。
何を検証したかを読む
開発ビルド、映像デモ、作者の実機記録は別の証拠です。プロトタイプに残る制限は紹介内に記載します。
構成の比較表
各条件はプロジェクト紹介に記したソースの版に対応します。性能測定や互換性保証ではありません。
| 一覧 | プロジェクトの役割 | 機材 | 実行場所 | 画面・音声の観測 | 入力経路 |
|---|---|---|---|---|---|
| Actell / 执言ja1chen | 画面操作エージェント | NCM経路ではネイティブUSB対応ESP32-S3を任意で使用 | Swift / Rustバックエンドを含むネイティブiPhoneアプリ | CoreDeviceによる画面取得 | CoreDeviceのタッチ操作 |
| AI Passport iPhone Agentlewangdev | 画面操作エージェント | FoloToy AI Passport / ESP32-C3。元のS3基板も選択可能 | MacまたはLinuxのサーバー | パソコン側のAirPlay / UxPlay | Bluetooth HID。任意でS3のUSB HID |
| Anan iPhone Useananhq | 入力ファームウェア | M5Stack StopWatch / ESP32-S3。他の基板は適合作業が必要 | 基板にMCPサーバー、クライアントにエージェント | クライアントが提供。ファームウェア自体は取得しない | USB HIDまたは実験的BLE入力 |
| C3 AgentZhaoYangGG | 画面操作エージェント | ESP32-C3。USBは電源と書き込み用 | ネイティブiPhoneアプリ | ユーザー許可によるScreenCaptureKit共有 | Bluetooth HIDマウスとキーボード |
| ESP32 Bluetooth Voice Agentmichaellee8 | 音声実験 | Classic BluetoothとPSRAM付きAI-Thinker ESP32 Audio Kit V2.2 / ESP32-A1S | ESP32ファームウェアとPC上のGo中継 | 画面取得なし。Bluetooth通話・通信音声を扱う | HFP音声。マウスやタッチ入力ではない |
| ESP32 iPhone Agent / Handsyonehumanbeing | 画面操作エージェント | PSRAMとネイティブUSBを備えたESP32-S3 | iPhoneアプリ。ビルドと署名にはパソコンが必要 | AirPlay → ESP32-S3 → BLE → アプリ | USB HIDマウスとキーボード |
| ESP32 iPhone Agent with Midsceneawait-ovo | 画面操作エージェント | 別電源のESP32-S3 N16R8。書き込みにはUSBシリアルを使用 | MidsceneのWebランタイムを同梱したネイティブiPhoneアプリ | iPhoneのScreenCaptureKit。共有開始ごとにユーザー許可が必要 | BLE HIDマウスとASCIIキーボード |
| ESP32 iPhone Agent for Windowsgrandexecuti | 画面操作エージェント | ネイティブUSB対応ESP32-S3。文書ではN16R8を使用 | Windows 10 / 11のパソコン | Windows上のUxPlay / GStreamer | 基板からUSB HID入力 |
| iPhone Agent Harnesscccat6 | 画面操作エージェント | ESP32 C2・C3・C5・C6・S3・classic。基板ごとに条件あり | iPhone / iPadのSafari | ブラウザの画面共有 | WebRTCブリッジ経由のBluetooth入力 |
| Oh My Phone UsegetGate | 画面操作エージェント | Classic Bluetooth対応のESP32-PICO-KIT-1 | MacのMCPサーバーとiOSアプリ | ReplayKitの画面共有アプリ | 操作はBLE HID、通話はHFP |
| Phone Agentboboabw | 画面操作エージェント | ESP32-S3。標準ファームウェアはGPIO48 RGBを使用 | ネイティブiPhoneアプリ | ユーザーが許可する画面全体の共有 | Bluetooth HIDマウスとASCIIキーボード |