AI 성능, 한계를 넘어서 🚀

고난도 벤치마크에서 급격히 향상된 AI 성능과 인간을 능가하는 영역

SWE-bench:

4.4%

71.7%

1년 만에 16배 이상 성능 향상

MMMU:

33.5%

65.3%

GPQA:

39.8%

58.2%

범례: 2023년 2024년

SORA, Veo 2와 같은 최신 모델은 긴 시간, 복잡한 물리적 상호작용, 일관된 캐릭터가 포함된 고품질 비디오를 생성할 수 있습니다. 이는 1년 전에는 상상하기 어려운 수준의 진전입니다.

AI는 코드 수정, 버그 해결, 실제 오픈소스 프로젝트의 문제 해결 등 특정 프로그래밍 작업에서 인간 개발자를 능가하는 성능을 보여주고 있습니다.

국제수학올림피아드(IMO) 문제 해결률이 9.3%에서 74.4%로 급증했습니다.

8배 향상

1 / 12