[🔥 o1-preview 2025 수능 국어 97점 달성 🔥]

2025학년도 수능 국어에서 O1-Preview가 97점이라는 놀라운 성적을 기록했습니다!

8번(3점) 한문제만 틀리고 나머지 모든 문제를 맞히는 만점에 가까운 점수를 받은 기록은 LLM이 한국어 언어능력에서 인간의 수준을 뛰어넘을 시기가 머지 않았다는 점을 보여주는것 같네요.

벤치마크에 필요한 gpu 자원과 자금의 확보가 되는대로 다른모델에 대해서도 벤치마크해서 공유하겠습니다!

추가로 리더보드에 2023 수능국어를 벤치마크 할 수 있는 튜토리얼을 업데이트했습니다!

cf)

- 본 벤치마크는 AutoRAG를 활용하여 진행했습니다!

- 실험 과정 정리 블로그: https://velog.io/@minsing-jin/%EC%86%8D%EB%B3%B4-o1-preview-2025-%EC%88%98%EB%8A%A5-%EA%B5%AD%EC%96%B4-97%EC%A0%90-%EB%8B%AC%EC%84%B1