장시간 자율 작업 하는 AI 에이전트 '마라톤러' 공개
원제 Marathoner: Ultra-Long-Horizon Autonomous Intelligence
추천 28댓글 2
Key Point
AI 에이전트가 단기 작업을 넘어 수개월 규모의 복잡한 소프트웨어 개발 같은 초장기 미션을 독립적으로 수행할 수 있는 가능성을 보여주기 때문입니다.
핵심 요약
- 허깅페이스 연구팀이 수개월 이상 지속적으로 목표를 추구하는 초장기 자율 에이전트 '마라톤러'를 제시했다.
- GitHub 주요 PR에서 1000줄 이상의 새 코드를 포함한 데이터를 수집해 초장기 태스크를 합성했으며, 여러 작업을 연결한 멀티태스크 체이닝으로 최고난도 태스크를 생성했다.
- 강력한 교사 모델과 다양한 하니스(harness)를 조합해 거부 샘플링 파인튜닝을 수행하고, 모델이 독립 샌드박스 환경에서 실제 작업을 실행하며 1000+ 도구 호출을 처리하도록 강화학습했다.
- 실행 후반부에 의미 있는 동작을 유도하는 '레이터 스테이지 보너스 리워드' 전략을 도입해 모델이 장시간 작업 중 의도적 행동을 하도록 장려했다.
- 5개 벤치마크에서 기본 모델 대비 지속적이고 실질적인 성능 향상을 달성했으며, 상용 대형 모델 성능도 초과했다.
- 마라톤러는 고난도 과제에서 10시간 이상 연속 작업을 수행하고 1000회 이상의 도구 호출을 실행할 수 있음을 보였다.