📢 X投稿文
ESP32($7)でiPhoneを自動操作。AirPlayで画面確認、LLMがタップ・スワイプ。デベロッパー環境やXcodeは不要で、OpenAI互換モデルで駆動可能。
https://github.com/onehumanbeing/esp32-iphone-agent
🤖 AI考察
■ 概要
低価格ESP32($7)とAirPlayで、Mac開発環境なしでiPhone自動化を実現。
■ 特徴・用途
- **アーキテクチャ**:USB接続のESP32がマウス+キーボード、AirPlayが画面取得とし、OpenAI互換ビジョンモデル(クラウド/ローカル両対応)で統合。XCTest依存を排除。
- **用途**:テスト自動化、AI駆動のモバイルエージェント、低リソース環境での多台数制御。
■ 結論
従来はMac + Xcode開発者アカウント必須だった iPhone 自動化を**汎用ハードウェア + ビジョンLLM**へシフトさせた、スケーラビリティと民主化に優れた設計。