쌓인 기록에서 찾기
무엇을 찾으세요?
날짜를 몰라도 됩니다. 제목·Key Point·요약·태그를 한꺼번에 뒤집니다.
검색 범위부터 2026년 11월 6일 (금)까지4037건
2건 · "영상이해"조건 지우기 ×
001▲ 11 · 댓글 1영상 대화에서 LLM의 기억력 측정하는 벤치마크 공개멀티모달 LLM이 시간 단위 영상을 처리하면서 긴 대화를 나누는 사용 사례가 늘고 있는데, 이를 제대로 평가하지 못하는 문제가 있다.AI · 머신러닝 · VideoMemBench: How Well Do MLLMs Remember in Video Conversations?
Key Point장문 영상 대화에서 LLM이 문맥을 얼마나 잘 유지하는지 측정할 수 있는 벤치마크가 처음 제시되었으며, 현재 최신 모델들도 45% 미만의 성능을 보여 개선할 여지가 크다는 점을 보여준다.
핵심 요약
- 멀티모달 LLM이 시간 단위 영상을 처리하면서 긴 대화를 나누는 사용 사례가 늘고 있는데, 이를 제대로 평가하지 못하는 문제가 있다.
- 기존 영상 질의응답 벤치마크는 각 질문이 독립적이고 이전 대화를 참고하지 않아, 대화 흐름에 따라 정보를 유지하는 능력(인컨텍스트 영상 기억)을 측정하지 못한다.
- 연구팀은 VideoMemBench를 제시했으며, 단일 영상에 장문의 멀티턴 대화를 연결하되 턴 간 의존성으로 구성했다.
전체 요약 9문장 읽기 →AI · 머신러닝 · Turns Matter: Advancing Streaming Video RL via Turn-Level Credit
Key Point스트리밍 데이터 처리에서 적절한 시점의 결정이 중요한 상황에서, 기존의 궤적 수준 학습의 한계를 턴 단위 신용 할당으로 극복하는 새로운 접근 방식을 제시한다.
핵심 요약
- 스트리밍 영상 이해는 모델이 반응할지 계속 관찰할지를 반복해서 결정해야 하는 문제이다.
- 기존의 Group Relative Policy Optimization(GRPO) 방식은 전체 궤적(trajectory) 수준의 장점만 공유하며, 이는 초기 성공 후 중복된 응답을 강화하고 초기 실패 후 유용한 후속 응답을 억제한다.
- TurnWise는 턴 단위 GRPO 프레임워크로, 각 스트리밍 결정마다 학습을 정렬하여 궤적 수준 피드백과 턴 수준 상호작용의 불일치를 해결한다.
전체 요약 6문장 읽기 →