AI 벤치마크 '맞춤 과외' 가능하다는데…국가대표 AI 어떻게 평가하나

AI 요약

특정 벤치마크를 겨냥한 데이터와 사후학습으로 점수를 집중적으로 끌어올리는 이른바 '벤치맥싱'이 확산하면서 벤치마크 점수의 해석 중요성이 커지고 있습니다. 애프터쿼리 등 맞춤형 데이터·사후학습 지원 업체들이 등장했으며, 애프터쿼리는 엔비디아 오픈소스 모델 '네모트론3 울트라' 학습에 자사 데이터를 제공해 GDPval 점수가 35.3점에서 46.7점으로 올랐다고 밝혔습니다. 독파모 2차 평가는 전체 100점 중 벤치마크 40점(AAII 25점·NIA 15점), 전문가 평가 35점, 사용자 평가 25점으로 구성되며 일반 국민 200명으로 구성된 국민평가단을 처음 도입해 실제 활용성도 함께 평가합니다.