AIが実機のiPhoneを操作する様子を見る

ESP32-S3を介して、視覚エージェントが実機のiPhoneを操作します。公開されている素材で動作のイメージをつかみ、自分の環境では簡単なタスクから試してください。

プロジェクトの動画

YouTubeでデモを見る（新しいタブで開きます）。

毎週繰り返すアラームを設定する

公開例では、毎週月曜と火曜の午前8時に鳴るアラームを設定して保存するよう指示しています。エージェントは時計アプリを開き、時刻と曜日を編集して保存します。

**バージョンについて：**この写真はパソコン側で動作していたv0.1.0のものです。タスクの例であり、現在の導入構成を示すものではありません。現在のmainではiPhoneアプリがエージェントを実行します。

現在のiPhoneアプリ

プロジェクトの実際の画像です。あなたの端末に接続しているライブ画面ではありません。

自分で試す最初のタスク

導入を終えたら、**「設定を開いてWi-Fiの画面に移動して」**と指示してみてください。ロック解除・縦向きの状態で動作を見守り、目的の画面になったか自分で確認します。

これは基本動作の確認に向けた提案であり、成功率の測定結果ではありません。モデル、最初の画面、接続、調整によって結果が変わるため、単純なタスクから始めましょう。

操作をステップごとに確認する

Runsでタップやスワイプを再生できます。うまくいかない場合は記録を出力し、最初に判断を誤った箇所や、実行できなかった操作を調べると原因を追いやすくなります。