LLM 에이전트의 경험을 재활용 가능한 스킬로 동적 변환
원제 ExpVoyager: Direct Experience Navigation for Dynamic Agent Skill Synthesis
추천 10댓글 2
Key Point
LLM 에이전트가 지속적으로 학습하고 확장하는 자율 진화 시스템을 실현하는 데 필수적인 경험 재활용의 문제를 해결하는 새로운 접근법이 제시된다.
핵심 요약
- 기존 LLM 에이전트의 기술 합성 방식은 구체적 작업이 정해지기 전에 경험을 고정된 절차적 지식으로 추상화하는 문제가 있어 나중에 필요한 정보를 버리거나 불필요한 세부사항을 남기는 경향이 있다.
- ExpVoyager는 에이전트의 축적된 궤적(trajectory)을 현재 작업의 필요에 맞춰 실시간으로 탐색하는 동적 네비게이션 방식으로 경험을 활용한다.
- 스킬 큐레이터가 저장된 경험을 다양한 관점과 해상도에서 탐색하며 재사용 가능한 절차적 지식을 식별하고, 다음에 어디를 탐색할지 가이드하는 남은 지식 요구사항을 추적한다.
- 다운스트림 작업 성능을 지속적으로 개선하며, 경험 데이터가 늘어남에 따라 성능이 계속 향상되고, 기존 기술들과 효율적인 경험 접근 방식으로 호환된다.