젬미니 4 네온, 오푸스 5.5와 동등한 수준의 경쟁자
원제 Gemini 4 Neon looks like an Opus 5.5 competitor
106 포인트댓글 36
Key Point
카본이 느린 속도로 인해 가능성을 살리지 못했던 가운데, 네온이 최고 수준 모델과 동등 성능에 훨씬 빠른 속도로 실용적인 대안이 될 수 있음을 보여준다.
핵심 요약
- 구글이 출시한 젬미니 4 네온은 젬미니 4 카본의 성능을 유지하면서 추론 속도를 크게 개선한 모델이다.
- 카본은 Agent Duel 리더보드에서 가장 좋은 성능을 보이지만 초당 46토큰의 느린 속도가 문제였고, 네온은 OpenRouter를 통해 초당 127토큰으로 2.7배 빠르다.
- 이를 바탕으로 성능을 모델링하면 네온의 예상 Elo 점수는 1,066으로, 오푸스 5.5의 1,078에 거의 근접한다.
- 네온과 오푸스 5.5의 Elo 차이에 대한 90% 신뢰구간은 -94~+68이며, 네온이 오푸스를 이길 확률은 약 48.3%로 추정된다.
- 리더보드 분석 결과 모델의 성능 외에 속도도 최종 순위에 거의 같은 수준으로 중요한 요소임이 나타났다.