phone-harness/phone-harness
AI 에이전트가 당신의 스마트폰을 직접 제어한다
원제 phone-harness/phone-harness
스타 5,439당일 +117Python
Key Point
실제 기기를 AI가 직접 조작하는 환경이 가능해져, 에이전트 기반 스마트폰 자동화가 현실이 되었다.
핵심 요약
- Claude Code, Codex 등 AI 에이전트가 스마트폰을 화면 터치, 스크롤, 타이핑으로 직접 제어할 수 있는 Phone Harness 프로젝트를 공개했다.
- iPhone은 macOS의 iPhone 미러링 윈도우를 통해, Android는 macOS·Linux·Windows에서 adb로 연결된다.
- 설정 시 iPhone은 macOS 15+, iOS 18+, 접근성 및 화면 녹화 권한이 필요하고, Android는 adb와 USB 디버깅이 필요하다.
- iPhone은 Apple의 Vision OCR로 화면을 읽고 입력 이벤트로 조작하며, Android는 adb로 스크린샷을 얻고 접근성 트리로 텍스트를 인식한다.
- Phone Harness Cloud는 호스팅된 Android 폰(세션당 신규 또는 저장된 폰)과 전용 iPhone을 제공하며, Android는 $20 플랜(월간·연간 옵션 없음), iPhone은 $20 보증금 후 월간·연간 플랜으로 운영된다.
- MCP, Hermes Agent, OpenClaw 같은 에이전트 프레임워크와 통합되며, 모든 폰이 동일한 헬퍼를 사용해 한 번 작성한 스크립트가 모든 폰에서 작동한다.
- iPhone 잠금 시 미러링이 일시 중지되고, OCR은 텍스트만 읽어 아이콘이 없는 컨트롤은 비전 모델이 필요하며, 멀티터치·카메라·Face ID·DRM 비디오는 지원하지 않는다.
- 폰 연결은 사용자가 해야 하고, `phone-harness doctor` 명령으로 설정을 확인할 수 있으며 프로젝트는 무료로 유지된다.
저장소 보기 ↗github.com