멀티에이전트 시스템의 프롬프트 최적화를 위한 CEPO 프레임워크
원제 CEPO: A General Framework for Improving Prompt Optimization in Multi-Agent Systems
추천 16댓글 1
Key Point
멀티에이전트 시스템에서 프롬프트 최적화의 일관성 문제를 해결하는 새로운 구조를 제시하며, 기존 방식과 달리 4개의 다양한 옵티마이저와 호환되어 범용성을 입증했습니다.
핵심 요약
- 멀티에이전트 시스템(MAS)에서 조정(coordination)과 작업 실행(execution)을 같은 프롬프트 안에서 다루던 기존 방식의 한계를 지적합니다.
- CEPO(Coordinator-Executor Prompt Optimization)는 시스템 수준의 조정과 에이전트 수준의 실행을 분리하는 새로운 프레임워크입니다.
- 공유 코디네이터 프롬프트와 에이전트별 실행 프롬프트로 구성되어, 조정 규칙은 일관되게 공유되고 실행 지침은 별도로 조정됩니다.
- CEPO는 프롬프트 구조와 최적화 지침을 제공하고, 기존의 프롬프트 옵티마이저들이 실제 탐색을 수행합니다.
- 4개 도메인의 11개 벤치마크에서 CEPO를 4개의 기존 옵티마이저에 적용했을 때 모두 성능 향상을 확인했습니다.
- 문서 이해 멀티에이전트 시스템에 대한 통제 실험에서 최적화 예산 효율성 개선과 에이전트 수 증가에 따른 성능 확장성을 입증했습니다.
- 절감 분석과 정성적 분석으로 제안된 설계의 유효성을 지지합니다.