“역대급 성능” 믿었는데…아스트라도 휘말린 ‘AI 성적표의 배신’

AI 요약

인공지능 성능의 척도로 여겨지는 벤치마크의 신뢰성이 도마에 올랐습니다; 오픈AI 공동창업자 안드레 카파시는 벤치마크가 신뢰를 잃었다고 문제제기했습니다. 오픈AI는 차세대 모델 GPT-6 아스트라를 소개하는 블로그 게시물 수정 과정에서 아스트라의 벤치마크 점수가 올라가고 경쟁사 앤트로픽의 점수는 내려가자 점수 부풀리기인 이른바 벤치맥싱 가능성이 제기되었습니다. 국내에선 모티프테크놀로지스의 모델이 AAII에서 높은 점수를 받았음에도 정부 독파모 선발전 2차 단계평가에서 탈락했고, 해외 기업 애프터쿼리와의 협업 사실 공개로 논란이 커졌으며 모티프는 평가가 불공정했다며 이의를 제기했습니다.