지니젠AI, 오픈라우터 426종 분석 '한국어 AI 품질 리더보드' 공개

AI 요약

지니젠AI가 글로벌 AI 모델 중개 플랫폼 오픈라우터의 모델 426종을 분석해 한국어 품질 평가 결과를 담은 리더보드를 허깅페이스에 공개했다고 17일 밝혔다. 지니젠AI는 이 중 330종을 높임말 정확도, 한국 제도 지식, 전문 용어, 지시 준수, 요약, 번역투 배제, 문체 일관성 등 7개 항목으로 평가한 결과 종합 A등급 이상은 7.6%(25종)에 불과하고 F등급은 33.6%(111종)를 차지했으며 존칭이나 연차·세목 안내 등 업무 정확도에서 오답이 빈번했다고 밝혔다. 동일한 모델이라도 107개 제공 사업자에 따라 가격 차이가 중앙값 기준 1.87배, 최대 14.47배까지 발생했고 정밀도와 가동률도 상이했다고 전했습니다.