GTA V를 AI 훈련장으로: 게임 과제로 강화학습 평가
원제 GTAGym: AAA Game Tasks Environment for Evaluation and Reinforcement Learning
추천 14댓글 5
Key Point
AAA 게임 환경에서 AI 에이전트를 객관적으로 평가하고 강화학습으로 훈련할 수 있는 자동화된 벤치마크가 생겨, 복잡한 현실 같은 과제에서 AI 성능을 측정하는 새로운 길이 열렸다.
핵심 요약
- AAA 게임은 에이전트의 지각, 추론, 제어 능력을 평가하기 위한 풍부한 테스트베드를 제공하지만, 과제 성공 여부를 자동으로 검증하기 어려워 수동 평가가 필요했다.
- 연구진은 GTA V 작업 평가 및 강화학습을 위한 환경 및 프레임워크인 GTAGym을 개발했다.
- GTAGym의 평가 벤치마크인 GTAVBench는 GTA V 메인 스토리 미션에서 추출한 9개 작업 계열의 103개 온라인 과제와 GTA V 이미지 기반 47개 사격·저격 과제를 포함한다.
- 웹 서버를 통해 온라인 환경과 평가 인터페이스를 제공하며, 스크린샷과 키보드-마우스 입력으로 병렬 테스트가 가능하고 자동 엔진 상태 검증이 이루어진다.
- 6개 대형 언어모델을 텍스트 지시 기반 GTAVBench와 첫 스크린샷만 지시를 포함하는 GTAVBench-AGI 버전에서 평가했으며, 최고 성능은 GTAVBench-AGI에서 70.9% 정확도를 달성했다.
- 항공 네비게이션, 회피, 요격 등은 여전히 어려운 과제로 남아있다.
- GTAGym은 사용자 지정 범위와 선택지 내에서 템플릿 기반 과제 매개변수를 샘플링하는 확장 가능한 생성기를 제공해 3D 및 이미지 기반 사격 환경 배치를 생성하며, 자동 보상 및 종료 신호를 포함한다.
- Qwen 3.8-27B 모델의 LoRA 강화학습을 생성된 도보 네비게이션 과제에 적용하면 도메인 내 성능이 15%에서 23%로 개선되며, GTA V 기본 과제로도 전이 학습이 가능하다.