OpenAI 직원인 William Fedus는 Chatbot Arena 리더보드에 나타난 신비한 채팅봇 "gpt-chatbot"이 새로 출시된 GPT-4o 모델의 사전 출시 버전임을 확인했습니다. 이 모델은 이러한 비공개 테스트 동안 플랫폼에서 기록된 최고 점수를 달성했습니다.
- OpenAI는 4월부터 아레나에서 "gpt2-chatbot" 및 "im-also-a-good-gpt2-chatbot"과 같은 가명을 사용하여 여러 버전의 GPT-4o를 테스트했습니다.
- 출시 후, GPT-4o는 약 50 Elo 포인트의 큰 차이로 이전 최상위 모델인 Claude 3 Opus와 GPT-4 Turbo를 앞질렀습니다.
- 기사 작성 시점 기준, 테스트 모델은 GPT-4-Turbo-2023-04-09의 1253점과 Claude 3 Opus의 1246점에 비해 Elo 점수 1309점을 기록했습니다.
공식 LMSYS 계정은 GPT-4o의 공개 버전이 이제 아레나에 진입했으며 곧 공개 리더보드에 나타날 것이라고 밝혔습니다.