10

산업계의 질주, 그러나 최전선 경쟁은 치열 🏢

기업들이 AI 모델 개발을 주도하는 가운데, 상위 모델 간 격차는 빠르게 좁혀지고 있습니다

산업계 vs 학계 AI 개발 비교

60%

2023년

90%

2024년

주목할 만한 AI 모델의 산업계 개발 비율

영향력 높은 연구 논문은 여전히 학계가 주도하고 있습니다

컴퓨팅 파워 및 데이터셋 성장률

5개월

마다 2배 증가

AI 학습용 컴퓨팅 파워

8개월

마다 2배 증가

AI 학습용 데이터셋 크기

전력 사용량도 매년 2배씩 증가

Llama 3.1 405B 모델 학습 시 8,930톤의 탄소 배출 (미국인 연평균 배출량 18톤의 496배)

상위 모델 간 성능 격차 감소

2023년: 상위 1위와 10위 모델 간 Elo 점수 차이 11.9%
2024년: 상위 1위와 10위 모델 간 Elo 점수 차이 5.4%

AI 최전선은 점점 더 경쟁이 치열해지고 붐비고 있습니다

2024년 상위 5개 모델 성능 (가상 예시)

Model A 100
Model B 98.5
Model C 97.2
Model D 96.3
Model E 95.7

새로운 기술과 접근법

테스트 시간 컴퓨팅

IMO 문제 해결률:
9.3%74.4%로 향상

단, 비용과 속도 단점 존재

AI 비디오 생성기

SORA, Veo 2와 같은 고품질 비디오 생성 기술 급발전

긴 시간, 복잡한 물리 상호작용 가능

작은 고성능 모델

Phi-3-mini(3.8B)가 이전 거대 모델 성능 추격

크기는 1/40 수준으로 감소

AI 에이전트

초기 가능성 보여주나 복잡한 추론과 신뢰성 과제 존재

기술적 발전 필요