epoch-capabilities-index 태그 문서 3개

Tag3건Article 3

이 태그와 연결된 문서를 한곳에서 모아보고, 함께 자주 등장하는 연관 태그까지 이어서 탐색할 수 있습니다.

연관 태그

문서 목록

총 3건 중 1-3건

$GPT-6 Astra leads on math benchmarks, but not on software engineering$

GPT 6 Astra는 종합 ECI와 수학에서 선두지만 소프트웨어 공학에서는 Claude Fable 5.1에 뒤처지며, 두 모델의 90% 신뢰구간이 겹쳐 점수 차이를 확정적 우위로 해석하기는 어렵다.

Epoch AI에 따르면 2024년 9월 추론 모델 도입 이후 ECI 최고 성능선은 연간 14점 상승해 비추론 모델의 연간 6점보다 빠르게 발전했다.

에포크 AI는 직업 자동화와 경제적 파급부터 모델 간 격차, 추론 확장, 인공지능 연구 자동화, 분포 밖 일반화와 새로운 아이디어 창출까지 아홉 가지 핵심 질문을 통해 벤치마크가 실제 인공지능 발전을 어떻게 측정해야 하는지 제시한다.