깃허브 코드에서 AI 에이전트용 스킬 자동 추출
원제 Grounded Skill Synthesis from Code at Scale for Agentic Intelligence
추천 92댓글 3
Key Point
에이전트 AI에 필요한 재사용 가능한 스킬을 스케일로 자동 확보할 수 있는 새로운 경로를 제시하며, 기존 방법의 한계를 보완하는 동시에 성능 개선을 입증했다.
핵심 요약
- Code2Skill이라는 파이프라인으로 19,769개 깃허브 저장소의 코드를 자동 분석해 100만 개 이상의 검증된 스킬 데이터베이스를 구축했다.
- 추출한 스킬에는 원자적 작업, 복합 워크플로우, 반복 패턴이 포함되며 소스 코드 재구성과 비교로 검증된다.
- 이 방식은 환경 상호작용이 필요 없으면서도 실행 가능한 증거를 제공한다는 점에서 기존 궤적 기반 방식과 다르다.
- 모델을 이 스킬 뱅크로 증강하면 8개 벤치마크에서 평균 11.7% 성능 향상을 보였고, 7개 공통 벤치마크에서 모두 기존 방식을 앞섰다.
- AI가 생성한 코드에서 추출한 스킬도 인간이 작성한 코드와 유사한 93.5% 통과율을 달성했다.