LLM 기초 이론을 담은 교과서 출판
Key Point
기초부터 체계적으로 LLM을 학습하고 싶은 개발자와 학생들에게 학습 가이드가 될 수 있는 자료다.
핵심 요약
- 대규모 언어모델의 기초 개념을 다루는 교과서가 출판되었다.
- 사전학습, 생성 모델, 프롬프팅, 정렬, 추론 등 6개 주요 영역을 구조적으로 설명한다.
- 최신 기술의 완전한 커버리지보다는 기초 개념 학습에 중점을 두었다.
쌓인 기록에서 찾기
무엇을 찾으세요?
날짜를 몰라도 됩니다. 제목·Key Point·요약·태그를 한꺼번에 뒤집니다.
검색 범위부터 2026년 10월 30일 (금)까지3636건
2건 · "자연언어처리"조건 지우기 ×
생의학 문장 인코더를 선택 결정 모델로 변환하는 방법
Key Point
생의학 자연언어 이해 작업에서 검색 학습의 효과가 모델 구조에 따라 크게 달라진다는 점과 기존 강화학습 방식의 구체적인 한계를 정량적으로 규명했다.
핵심 요약
- 검색 학습으로 훈련된 생의학 문장 인코더를 스키마 제약이 있는 예/아니오 질문에 답하는 타입 결정 모델로 변환하는 SBERT2S1을 제시했다.
- 6개의 모델 쌍에서 제로샷 테스트 결과, 검색 학습이 있으면 내용 있는 선택지 매칭이 개선되는 것을 확인했다.
- 미세조정 후 효과는 모델 구조에 따라 달라졌는데, 검색 사전 정보를 유지하는 PFR 구조는 5개 모델 쌍과 3개 훈련 크기에서 15번 중 10번 개선되었으나, 교차 주의 구조(C)는 5번 악화되고 1번만 개선됐다.