AI エージェントがモバイルアプリを
実際のシミュレータでテスト
新しい画面を書いたのはエージェントなのに、エージェントはそれが動くところを一度も見ていません。AgentsRoom なら、エージェントがあなたのコンピュータで iOS シミュレータか Android エミュレータを起動し、ビルドをインストールし、画面をタップして確かめ、「できました」と言う前にスクリーンショットを送ってきます。
AgentsRoom-Device MCP サーバーは、Claude Code、Codex、Cursor をはじめとするエージェント CLI にデバイス用のツール一式を渡します。デバイスの起動、.app や .apk のインストール、アプリの起動、ディープリンクや Expo dev client の URL を開く、タップ、スワイプ、入力、ホームや戻るを押す、画面の読み取り、スクリーンショット、ログの読み取り。デバイスの様子は AgentsRoom でライブで見られ、いつでも操作を代われます。
エージェント
デバイスツール
- device_boot
- device_install_app
- device_tap
- device_screenshot
コーディングエージェントは、React Native の画面も、SwiftUI のビューも、Kotlin のアクティビティも数分で書けます。それでも、ちゃんと動くかを確かめるのはいまもあなたの仕事です。ビルドして、シミュレータを開き、流れに沿ってタップし、キーボードの下に隠れたボタンに気づき、スクリーンショットを会話に貼り直す。
Web アプリなら、エージェントはすでにブラウザで自分の作業をテストしています。モバイルアプリには、普段使うツールの中に同じものがありませんでした。iOS シミュレータの MCP や Android エミュレータの MCP は、CLI ごとに 1 つずつ探して、インストールして、設定する必要がありました。
AgentsRoom がその欠けていた部分を提供します。「デバイスへのアクセス」を与えたエージェントは、どの CLI でもデバイスツールを使えます。操作するのはあなたのコンピュータにすでにあるシミュレータとエミュレータで、エージェントがすることはすべてライブで見えます。
エージェントがデバイスでできること
モバイルの画面を確かめるために手でやっていた作業を、その画面を書いたエージェント自身がこなします。
起動、インストール、アプリ起動
エージェントはあなたのコンピュータにあるシミュレータとエミュレータを一覧にし、1 台を起動して準備ができるまで待ちます。シミュレータ用の .app か .apk をインストールし、バンドル ID またはパッケージ名でアプリを起動します。
ディープリンクと Expo
ディープリンクや Expo dev client の URL を開きます。Android では Metro に必要なポートを転送できるので、エミュレータからあなたのコンピュータで動いているバンドラーに届きます。
タップ、スワイプ、入力
画面上の要素を読み取り、参照か位置を指定してタップし、スワイプし、テキストを入力し、ホーム、戻る、Enter、音量キーを押します。画面が変わる操作のたびに、スクリーンショットが返ってきます。
AgentsRoom でライブ画面
「テスト > デバイス」では、デバイスを毎秒最大 30 フレームでライブ表示します。すべてのシミュレータとエミュレータを探せる検索、「起動」と「停止」、「ホーム」、「戻る」、スクリーンショットをコピーするボタンがあります。
ワンタップで操作を代わる
ライブ画面をタップ、ドラッグ、または入力すると、操作はあなたに移ります。エージェントは待機し、バナーがそれを知らせます。「操作を戻す」でデバイスはエージェントに戻り、2 分間なにも操作しなければ自動で戻ります。
既定はオフ、エージェントごとに許可
ツールを使えるのは「デバイスへのアクセス」を持つエージェントだけで、アクセスは操作のたびに改めて確認されます。1 台のデバイスを操作できるエージェントは同時に 1 つだけです。最近の操作は一覧に残りますが、入力されたテキストは残りません。
仕組み
あなたはチェックを 1 つ入れるだけ。確認はエージェントがやります。
- 1
エージェントに「デバイスへのアクセス」を与える
エージェントを編集し、「機能」を開いて「デバイスへのアクセス(iOS シミュレータ、Android エミュレータ)」にチェックを入れます。新しいエージェントの既定にすることもできます。すべてのプロジェクトなら「設定」で、1 つのプロジェクトだけならそのプロジェクトの設定で変えられます。
- 2
デバイスでの確認を頼む
シミュレータ向けにアプリをビルドし(Expo なら npx expo run:ios または npx expo run:android)、画面を確認するようエージェントに頼みます。エージェントは device_list を呼び出し、起動中のデバイスがなければ 1 台起動し、ビルドをインストールしてアプリを起動します。
- 3
画面をひととおり操作する
エージェントはテスターと同じように、画面を読み取り、タップし、入力し、スワイプします。うまくいかないところがあればアプリのログを読み、コードを直してもう一度試し、結果のスクリーンショットを送ってきます。
- 4
見守るか、操作を代わる
右パネルの「テスト > デバイス」を開くと、デバイスのライブ画面と、どのエージェントが操作しているかが見えます。画面をタップすれば操作を代われます。終わったら「操作を戻す」を押してください。
コンピュータに必要なもの
iOS:Xcode を入れた Mac(Command Line Tools だけでは足りません)と、iOS シミュレータのランタイムが 1 つ以上必要です。デバイスの起動、インストール、リンク、スクリーンショット、ログはどの Mac でも使えます。画面のタッチ、入力、ライブ表示には Apple Silicon の Mac と serve-sim が必要です。serve-sim はオープンソースのツールで、npm install -g serve-sim で一度インストールすれば済みます。
Android:Android Studio の Android SDK と Android Emulator パッケージ、それに Device Manager で作成した仮想デバイスが 1 台以上必要です。macOS、Windows、Linux で動きます。Windows ではハードウェア仮想化(Windows Hypervisor Platform)が、Linux では /dev/kvm へのアクセスが必要です。
足りないものがあれば、何をどうインストールすればよいかを、AgentsRoom が「デバイス」タブとエージェント自身の回答で伝えます。あなたの知らないところで何かがダウンロードされることはありません。
制限事項
- 対応するのはシミュレータとエミュレータだけです。実機の iPhone や Android スマートフォン、watchOS、tvOS、visionOS には対応していません。
- iOS シミュレータは Mac にしかありません。Windows と Linux では、エージェントは Android エミュレータを操作します。
- Xcode 27 では、シミュレータのウィンドウを表示したままにしておく必要があり、画面をタッチするには AgentsRoom にアクセシビリティの権限が必要です。
- Android エミュレータでは、エージェントが入力できるのは ASCII 文字だけのテキストです。iOS シミュレータでは、どんな文字もどんなキーボード配列も使えます。
- Android のライブ画面は、AgentsRoom から起動したエミュレータで使えます。Android Studio から起動したエミュレータもエージェントの操作はすべて受け付けますが、「テスト > デバイス」から起動するまでライブ画面は表示されません。
- 1 つのエージェントが AgentsRoom で同時に起動できるデバイスは最大 2 台です。エミュレータは 1 台で 2〜4 GB のメモリを使うためです。エージェントはデバイスをシャットダウンできません。AgentsRoom が起動したデバイスはアプリを終了すると停止し、あなたが起動したデバイスには一切手を触れません。
- 「デバイスへのアクセス」をオフにすると、エージェントの次の操作から反映されます。すでに実行中のエージェントでオンにした場合は、そのエージェントを再起動したときに反映されます。
よくある質問
ほかのことを質問するClaude Code は iOS アプリをシミュレータで自分でテストできますか?
Codex や Cursor 向けの iOS シミュレータ MCP や Android エミュレータ MCP もありますか?
Expo や React Native でも使えますか?
エージェントがシミュレータで何をしているか見られますか?
Windows や Linux でも使えますか?
エージェントは実機の iPhone や Android スマートフォンを使えますか?
2 つのエージェントが同じシミュレータを使おうとしたらどうなりますか?
エージェントにデバイスを操作させても安全ですか?
QA エージェントに、開発エージェントの代わりにモバイルアプリをテストさせられますか?
エージェントのスクリーンショットをスマートフォンから見られますか?
さらに詳しく
AIエージェントのループ:自己修正するコーディングエージェントはこうして仕事をやり切る
AIエージェントのループは、プロンプトして直すという作業を自己修正のサイクルに変えます。エージェントが計画を書き、それを実装し、計画と照らして自分の仕事をレビューし、完了するまでループする。Claude Code、Codex、Antigravity CLI、Cursor、そしてRalph loopでこのループがどう動くかを解説します。
MCP のトークン消費を減らす:ツール定義を 60% 削った方法
エージェントが呼び出せる MCP ツールは、どれもモデルがリクエストのたびに読む可能性のある JSON の塊です。私たちのツールは約 95,000 トークンありました。自分のツールを 2 分で測る方法、ツールを 1 つも削除せずに削ったもの、そして再び膨らむのを防ぐ予算チェックを紹介します。
こちらもおすすめ
Browser MCP • Embedded Chromium • Agent-driven QA
QAエージェントがlocalhost上で本物のChromiumを開き、クリック、入力、スクリーンショット撮影、コンソールの読み取りを行い、機能が動作することを確認します。Playwrightの設定は不要です。
エージェント委譲:開発からQAへ:テストには安価なモデル
開発エージェントがMCP経由でテストの実行を安価なQAエージェントに引き継ぎます。高価なモデルはコードに専念でき、トークン代もコンテキストも軽いままです。
ライブプレビュー
AgentsRoomのlocalhostトンネルは、あらゆるローカル開発サーバーをカスタムサブドメイン付きのパブリックHTTPS URLとして公開します。ADEに組み込まれた無料のngrok代替ツール。Vite HMR、Next.jsホットリロード、Expo MetroバンドラーをWebSocketパススルーで即座にlocalhost共有。
画面の確認は、エージェント自身に任せましょう。
エージェントが操作するシミュレータとエミュレータは、macOS、Windows、Linux の AgentsRoom で使えます。iOS シミュレータには Mac が必要です。
コンパニオンアプリ:外出先でもエージェントを確認
Claude、Codex、Antigravity CLI、またはその他の AI プロバイダーを使用します。
バグや要望を公開バックログに直接送信できます。