AGI의 시작, OpenAI의 새로운 모델 시리즈, "o3" | 12 Days of OpenAI: Day 12 (마지막 날)

AI, 특히 LLM(Large Language Model)에 관심이 많은 학생입니다.
채널에서는, 주로 AI 활용, AI 뉴스 등을 컨텐츠로 다루며, 
데이터분석, 수학에 관한 영상도 업로드하고 있습니다.

준랩 | JoonLab

새로운 모델 시리즈 o3 및 o3-mini 발표

12일간의 OpenAI 이벤트 마지막 날 흥미로운 발표

첫 번째 추론 모델 o1 출시 이후 사람들의 반응 소개

AI의 다음 단계로서 점점 더 복잡한 작업 수행 가능성 제시

새로운 프런티어 모델 o3 및 o3-mini 발표

현재 공개 출시는 아니며, 공개 안전 테스트를 위한 신청 접수 시작

o3 모델의 성능 및 벤치마크 결과

다양한 기술 벤치마크에서 우수한 성능을 보임

코딩 벤치마크(SweetBench Verified)에서 o1 모델보다 20% 이상 향상된 정확도(71.7%) 기록

경쟁 코드 벤치마크(CodeForces)에서 높은 ELO 점수(2727) 달성

수학 벤치마크(AMI)에서 o1 모델보다 높은 정확도(96.7%) 기록

GPQA Diamond 벤치마크에서 박사급 과학 문제에 대해 o1보다 10% 향상된 정확도(87.7%) 기록

Epic AI의 Frontier Math 벤치마크에서 25% 이상의 정확도 달성 (기존 모델들의 2% 미만과 비교)

ARC Prize Foundation의 AGI 벤치마크 소개

ARC AGI 벤치마크의 원리 및 예시 문제 설명

o3 모델이 ArcAGI 벤치마크에서 75.7점(낮은 컴퓨팅 환경) 및 87.5점(높은 컴퓨팅 환경)을 기록하며 최고 점수 경신

o3-mini 모델은 o3 제품군의 새로운 모델로, 비용 효율적인 추론의 새로운 기준 제시

적응형 사고 시간 기능 지원 (낮음, 중간, 높음)

코딩 평가에서 o1 Mini 및 o1보다 우수한 성능 기록

비용 대비 성능 면에서 뛰어난 효율성을 보임

함수 호출, 구조화된 출력, 개발자 메시지 등 다양한 API 기능 지원

o3 및 o3-mini 모델의 안전 테스트 및 출시 계획

안전성 강화를 위한 사후 훈련 및 내부 안전 테스트 진행 중

외부 안전 테스트 참여를 위한 신청 접수 (마감일: 1월 10일)

새로운 안전 프로그램: 숙고적 정렬(Deliberative Alignment)

모델의 추론 능력을 활용하여 더욱 정확한 안전 경계 설정

숙고적 정렬 기법을 통해 안전 사양을 설정하고 모델이 프롬프트의 안전성을 판단

거부 벤치마크에서 이전 모델들보다 향상된 성능을 보임 (정확한 거부 및 과도한 거부 방지)

o3-mini는 1월 말, o3는 그 이후에 출시 예정