เอเจนต์ AI ของคุณทดสอบแอปมือถือ
บนซิมูเลเตอร์จริง
เอเจนต์ของคุณเขียนหน้าจอใหม่เสร็จแล้ว แต่ไม่เคยเห็นมันทำงานจริง ด้วย AgentsRoom เอเจนต์จะเริ่มซิมูเลเตอร์ iOS หรืออีมูเลเตอร์ Android บนคอมพิวเตอร์ของคุณ ติดตั้งบิลด์ แตะไล่ไปตามหน้าจอ และส่งภาพหน้าจอให้คุณก่อนจะบอกว่างานเสร็จ
เซิร์ฟเวอร์ MCP AgentsRoom-Device มอบชุดเครื่องมืออุปกรณ์ให้ Claude Code, Codex, Cursor และ CLI เอเจนต์อื่นๆ: เริ่มอุปกรณ์ ติดตั้งไฟล์ .app หรือ .apk เปิดแอป เปิดดีปลิงก์หรือ URL ของ Expo dev client แตะ ปัด พิมพ์ กดปุ่ม “หน้าหลัก” หรือ “ย้อนกลับ” อ่านหน้าจอ จับภาพหน้าจอ และอ่านล็อก คุณดูอุปกรณ์แบบสดใน AgentsRoom และเข้าควบคุมได้ทุกเมื่อ
เอเจนต์
เครื่องมืออุปกรณ์
- device_boot
- device_install_app
- device_tap
- device_screenshot
เอเจนต์เขียนโค้ดเขียนหน้าจอ React Native, view ของ SwiftUI หรือ activity ของ Kotlin ได้ในไม่กี่นาที แต่การตรวจว่ามันใช้งานได้จริงยังเป็นงานของคุณ: บิลด์ เปิดซิมูเลเตอร์ แตะไล่ไปตามขั้นตอน สังเกตเห็นปุ่มที่ถูกคีย์บอร์ดบังอยู่ แล้ววางภาพหน้าจอกลับเข้าไปในบทสนทนา
สำหรับเว็บแอป เอเจนต์ทดสอบงานของตัวเองในเบราว์เซอร์ได้อยู่แล้ว แต่แอปมือถือยังไม่มีสิ่งเทียบเท่าในเครื่องมือที่คุณใช้ทุกวัน: MCP สำหรับซิมูเลเตอร์ iOS หรือ MCP สำหรับอีมูเลเตอร์ Android ต้องหาเอง ติดตั้งเอง และตั้งค่าให้ CLI ทีละตัว
AgentsRoom มีส่วนนี้ให้พร้อมใช้แล้ว เอเจนต์ที่คุณให้ “การเข้าถึงอุปกรณ์” จะได้เครื่องมืออุปกรณ์ ไม่ว่าจะใช้ CLI ตัวไหน เอเจนต์ควบคุมซิมูเลเตอร์และอีมูเลเตอร์ที่มีอยู่แล้วบนคอมพิวเตอร์ของคุณ และคุณเห็นทุกอย่างที่มันทำแบบสด
สิ่งที่เอเจนต์ของคุณทำได้บนอุปกรณ์
ขั้นตอนที่คุณเคยทำเองเพื่อตรวจหน้าจอแอปมือถือ ทำโดยเอเจนต์ที่เขียนหน้าจอนั้นขึ้นมา
เริ่ม ติดตั้ง เปิดแอป
เอเจนต์แสดงรายการซิมูเลเตอร์และอีมูเลเตอร์บนคอมพิวเตอร์ของคุณ เริ่มเครื่องหนึ่งแล้วรอจนพร้อม ติดตั้งไฟล์ .app สำหรับซิมูเลเตอร์หรือไฟล์ .apk แล้วเปิดแอปด้วย bundle id หรือชื่อแพ็กเกจ
ดีปลิงก์และ Expo
เอเจนต์เปิดดีปลิงก์หรือ URL ของ Expo dev client ได้ บน Android ยังส่งต่อพอร์ตที่ Metro ต้องใช้ได้ด้วย อีมูเลเตอร์จึงเชื่อมถึง bundler ที่รันอยู่บนคอมพิวเตอร์ของคุณ
แตะ ปัด พิมพ์
เอเจนต์อ่านองค์ประกอบบนหน้าจอ แตะองค์ประกอบด้วยรหัสอ้างอิงหรือตามตำแหน่ง ปัด พิมพ์ข้อความ และกดปุ่ม “หน้าหลัก” “ย้อนกลับ” Enter หรือปุ่มปรับเสียง ทุกการกระทำที่เปลี่ยนหน้าจอจะได้ภาพหน้าจอกลับมา
หน้าจอสดใน AgentsRoom
“การทดสอบ > อุปกรณ์” แสดงอุปกรณ์แบบสด สูงสุด 30 เฟรมต่อวินาที พร้อมช่องค้นหาซิมูเลเตอร์และอีมูเลเตอร์ทุกเครื่อง ปุ่ม “เริ่ม” และ “หยุด” “หน้าหลัก” “ย้อนกลับ” และปุ่มคัดลอกภาพหน้าจอ
เข้าควบคุมได้ในแตะเดียว
แตะ ลาก หรือพิมพ์บนหน้าจอสด แล้วการควบคุมจะเป็นของคุณ: เอเจนต์จะรอ และมีแบนเนอร์แจ้งไว้ “คืนการควบคุม” จะคืนอุปกรณ์ให้เอเจนต์ และถ้าไม่มีการแตะหรือลากเลย 2 นาที การควบคุมจะกลับไปเอง
ปิดเป็นค่าเริ่มต้น เปิดให้ทีละเอเจนต์
เฉพาะเอเจนต์ที่มี “การเข้าถึงอุปกรณ์” เท่านั้นที่ได้เครื่องมือ และสิทธิ์จะถูกตรวจซ้ำทุกการกระทำ อุปกรณ์หนึ่งเครื่องมีเอเจนต์ควบคุมได้ครั้งละตัวเดียว และการกระทำล่าสุดจะแสดงเป็นรายการ โดยไม่แสดงข้อความที่พิมพ์เลย
วิธีการทำงาน
คุณเลือกแค่ช่องเดียว ที่เหลือเอเจนต์ตรวจเอง
- 1
ให้ “การเข้าถึงอุปกรณ์” แก่เอเจนต์
แก้ไขเอเจนต์ เปิด “ความสามารถ” แล้วเลือก “การเข้าถึงอุปกรณ์ (ซิมูเลเตอร์ iOS, อีมูเลเตอร์ Android)” คุณยังตั้งให้เป็นค่าเริ่มต้นของเอเจนต์ใหม่ได้ ในการตั้งค่าสำหรับทุกโปรเจกต์ หรือในการตั้งค่าของโปรเจกต์เดียว
- 2
ขอให้ตรวจบนอุปกรณ์
ขอให้เอเจนต์บิลด์แอปสำหรับซิมูเลเตอร์ (ถ้าใช้ Expo: npx expo run:ios หรือ npx expo run:android) แล้วตรวจหน้าจอที่ต้องการ เอเจนต์จะเรียก device_list เริ่มอุปกรณ์ถ้ายังไม่มีเครื่องไหนทำงาน ติดตั้งบิลด์ และเปิดแอป
- 3
เอเจนต์ไล่ทดสอบหน้าจอ
เอเจนต์อ่านหน้าจอ แตะ พิมพ์ และปัด แบบเดียวกับผู้ทดสอบ เมื่อมีอะไรผิดพลาด เอเจนต์จะอ่านล็อกของแอป แก้โค้ดของตัวเอง แล้วลองใหม่ จากนั้นส่งภาพหน้าจอผลลัพธ์ให้คุณ
- 4
ดูอยู่ห่างๆ หรือเข้าควบคุม
เปิด “การทดสอบ > อุปกรณ์” ในแผงด้านขวาเพื่อดูอุปกรณ์แบบสดและดูว่าเอเจนต์ตัวไหนกำลังควบคุม แตะหน้าจอเพื่อเข้าควบคุม แล้วกด “คืนการควบคุม” เมื่อเสร็จ
สิ่งที่ต้องมีบนคอมพิวเตอร์ของคุณ
iOS: Mac ที่มี Xcode (มีแค่ Command Line Tools ไม่พอ) และรันไทม์ซิมูเลเตอร์ iOS อย่างน้อยหนึ่งตัว การเริ่มอุปกรณ์ การติดตั้ง ลิงก์ ภาพหน้าจอ และล็อก ใช้ได้บน Mac ทุกเครื่อง ส่วนการแตะหน้าจอ การพิมพ์ และหน้าจอสด ต้องใช้ Mac ที่เป็น Apple Silicon และ serve-sim ซึ่งเป็นเครื่องมือโอเพนซอร์สที่ติดตั้งครั้งเดียวด้วย npm install -g serve-sim
Android: Android SDK จาก Android Studio พร้อมแพ็กเกจ Android Emulator และอุปกรณ์เสมือนอย่างน้อยหนึ่งเครื่องที่สร้างไว้ใน Device Manager ใช้ได้บน macOS, Windows และ Linux บน Windows ต้องมีการจำลองเสมือนระดับฮาร์ดแวร์ (Windows Hypervisor Platform) บน Linux ต้องเข้าถึง /dev/kvm ได้
เมื่อขาดอะไรไป AgentsRoom จะบอกว่าต้องติดตั้งอะไรและติดตั้งอย่างไร ทั้งในแท็บ “อุปกรณ์” และในคำตอบของเอเจนต์เอง ไม่มีอะไรถูกดาวน์โหลดลับหลังคุณ
ข้อจำกัด
- รองรับเฉพาะซิมูเลเตอร์และอีมูเลเตอร์: ไม่รองรับ iPhone และโทรศัพท์ Android เครื่องจริง รวมถึง watchOS, tvOS และ visionOS
- ซิมูเลเตอร์ iOS มีเฉพาะบน Mac บน Windows และ Linux เอเจนต์จะควบคุมอีมูเลเตอร์ Android
- เมื่อใช้ Xcode 27 หน้าต่าง Simulator ต้องมองเห็นอยู่ตลอด และ AgentsRoom ต้องได้สิทธิ์การช่วยการเข้าถึงเพื่อแตะหน้าจอ
- บนอีมูเลเตอร์ Android เอเจนต์พิมพ์ได้เฉพาะข้อความ ASCII ธรรมดา ส่วนบนซิมูเลเตอร์ iOS พิมพ์ได้ทุกตัวอักษรและทุกรูปแบบแป้นพิมพ์
- หน้าจอ Android แบบสดใช้ได้กับอีมูเลเตอร์ที่เริ่มจาก AgentsRoom อีมูเลเตอร์ที่เริ่มจาก Android Studio ยังรับทุกการกระทำของเอเจนต์ได้ แต่จะไม่มีหน้าจอสดจนกว่าคุณจะเริ่มมันจาก “การทดสอบ > อุปกรณ์”
- เอเจนต์หนึ่งตัวมีอุปกรณ์ที่ AgentsRoom เริ่มไว้พร้อมกันได้ไม่เกินสองเครื่อง เพราะอีมูเลเตอร์แต่ละเครื่องใช้หน่วยความจำ 2 ถึง 4 GB เอเจนต์ปิดอุปกรณ์ไม่ได้ อุปกรณ์ที่ AgentsRoom เริ่มไว้จะหยุดเมื่อคุณออกจากแอป ส่วนเครื่องที่คุณเริ่มเองจะไม่ถูกแตะต้องเลย
- การปิด “การเข้าถึงอุปกรณ์” มีผลตั้งแต่การกระทำถัดไปของเอเจนต์ ส่วนการเปิดให้เอเจนต์ที่กำลังทำงานอยู่จะมีผลเมื่อรีสตาร์ทเอเจนต์นั้นแล้ว
คำถามที่พบบ่อย
ถามเราเรื่องอื่นClaude Code ทดสอบแอป iOS ของฉันบนซิมูเลเตอร์ได้เองไหม?
มี MCP สำหรับซิมูเลเตอร์ iOS หรือ MCP สำหรับอีมูเลเตอร์ Android ให้ Codex และ Cursor ด้วยไหม?
ใช้กับ Expo และ React Native ได้ไหม?
ฉันดูสิ่งที่เอเจนต์ทำบนซิมูเลเตอร์ได้ไหม?
ใช้บน Windows หรือ Linux ได้ไหม?
เอเจนต์ใช้ iPhone หรือโทรศัพท์ Android เครื่องจริงของฉันได้ไหม?
จะเกิดอะไรขึ้นถ้าเอเจนต์สองตัวต้องการใช้ซิมูเลเตอร์เครื่องเดียวกัน?
ปล่อยให้เอเจนต์ควบคุมอุปกรณ์ปลอดภัยไหม?
เอเจนต์ QA ทดสอบแอปมือถือแทนเอเจนต์ dev ของฉันได้ไหม?
ฉันดูภาพหน้าจอของเอเจนต์จากโทรศัพท์ได้ไหม?
เจาะลึกเพิ่มเติม
วงจรเอเจนต์ AI: วิธีที่เอเจนต์การเขียนโค้ดที่แก้ไขตัวเองเสร็จสิ้นงาน
วงจรเอเจนต์ AI เปลี่ยนการสั่งพรอมต์แล้วแก้ไขให้เป็นวงจรที่แก้ไขตัวเอง: เอเจนต์เขียนแผน สร้างมัน ตรวจสอบงานของตัวเองกับแผน และวนซ้ำจนกว่าจะเสร็จสิ้น วงจรทำงานอย่างไรใน Claude Code, Codex, Antigravity CLI, Cursor และวงจร Ralph.
ลดการใช้โทเค็นของ MCP: เราลดคำจำกัดความของเครื่องมือลง 60% ได้อย่างไร
เครื่องมือ MCP ทุกตัวที่เอเจนต์ของคุณเรียกใช้ได้คือบล็อก JSON ที่โมเดลอาจอ่านในทุกคำขอ ของเราหนักราว 95,000 โทเค็น นี่คือวิธีวัดของคุณภายในสองนาที สิ่งที่เราตัดออกโดยไม่ลบเครื่องมือแม้แต่ตัวเดียว และการตรวจงบประมาณที่ไม่ปล่อยให้มันกลับมาบวมอีก
คุณอาจสนใจ
Browser MCP • Chromium ฝังตัว • QA ขับเคลื่อนโดยเอเจนต์
เอเจนต์ QA ของคุณเปิดเบราว์เซอร์ Chromium จริงบน localhost ของคุณ คลิก พิมพ์ ถ่ายภาพหน้าจอ อ่านคอนโซล และยืนยันว่าฟีเจอร์ทำงานได้จริง ไม่ต้องตั้งค่า Playwright เลย
การมอบหมายเอเจนต์: Dev ไปยัง QA: โมเดลที่มีค่าใช้จ่ายถูกกว่าบนการทดสอบ
เอเจนต์พัฒนาของคุณส่งงานรันเทสต์ต่อให้เอเจนต์ QA ที่มีค่าใช้จ่ายถูกกว่าผ่าน MCP โมเดลราคาแพงยังคงโฟกัสอยู่ที่โค้ด ส่วนค่าโทเค็นและบริบทก็ยังคงเล็กทั้งคู่
การแสดงตัวอย่างสด
AgentsRoom localhost tunnel เปิดเผยเซิร์ฟเวอร์พัฒนาท้องถิ่นใด ๆ เป็น URL HTTPS สาธารณะพร้อมซับโดเมนที่กำหนดเอง เป็นทางเลือกฟรี ngrok ที่สร้างขึ้นใน ADE ของคุณ แชร์ localhost ได้ทันที รองรับ Vite HMR, Next.js hot reload และ Expo Metro bundler ผ่าน WebSocket passthrough ไม่มีการปรับใช้ ไม่มีการกำหนดค่า ไม่มี CLI เพียงคลิกเดียว
ให้เอเจนต์ตรวจหน้าจอของตัวเอง
ซิมูเลเตอร์และอีมูเลเตอร์ที่เอเจนต์ของคุณควบคุม มีอยู่ใน AgentsRoom บน macOS, Windows และ Linux ส่วนซิมูเลเตอร์ iOS ต้องใช้ Mac
แอปคู่หู: ตรวจสอบเอเจนต์ของคุณได้ทุกที่
นำของคุณเอง: Claude, Codex, Antigravity CLI, หรือผู้ให้บริการ AI อื่น ๆ
ส่งข้อบกพร่องและคำขอไปยังแบ็คล็อกสาธารณะของคุณโดยตรง