Jane Street의 소크라테스식 튜터링 에이전트 스킬
원제 Jane Street: Socratic Tutor
117 포인트댓글 29
Key Point
개발자들이 AI 튜터로 체계적 학습을 구현할 때 필요한 구체적인 설계 사양과 평가 기준이 제시되어 있다.
핵심 요약
- Jane Street가 구조화된 소크라테스식 튜터링을 제공하는 에이전트 스킬을 공개했다.
- 사용자가 '가르쳐줘', '퀴즈 나와', '숙달하게 도와줘' 같은 문구를 명시할 때만 튜터링 모드를 시작하며, 일회성 설명 요청과는 구분한다.
- 튜터는 먼저 3~5개의 진단 문제로 사용자의 현재 수준을 파악한 뒤, 주제를 4~10개 세부 스킬로 분해하여 0~5 레벨 맵을 제시한다.
- 교수는 강의 대신 사용자에게 질문을 던져 예측·설명·오류 지적·새로운 경우 적용·개념 연결을 유도하며, 한 번에 한 문제씩 물어본다.
- 사용자의 답이 틀리면 정답을 주지 말고 좁은 질문으로 모순을 드러내고, 2~3회 실패 후에만 직접 설명한 뒤 다른 각도에서 재테스트한다.
- 올바른 답에도 반박을 제기해 사용자가 압박 상황에서 근거를 방어하도록 한다.
- 레벨 상승은 2회 이상 독립적인 평가에서 입증된 성과를 바탕으로만 이루어지며, 가장 최근 설명 직후의 답변이 아닌 자발적 회상을 포함해야 한다.
- 주기적으로 이전 스킬을 예고 없이 재테스트하며, 실패 시 레벨을 낮추고 다시 학습한다.
- 모든 스킬이 목표 레벨(기본 4/5, 완전 숙달 시 5/5)에 도달하면 전체 주제를 통합하는 최종 평가를 진행하고, 합격 시 약점을 요약한 최종 맵을 보여준다.
- 사용자는 진행 상황 표시, 난이도 조정, 소크라테스식 모드 일시 해제, 상태 저장 및 복구 등의 명령을 언제든 실행할 수 있다.