휴먼랩스, 글로벌 사우스 언어 전반에 걸친 AI 음성 벤치마킹 보고서 출시

AI 요약

휴먼랩스가 5월 13일 글로벌 사우스 비영어권 22개 언어에서 15개 상용 모델을 평가한 최대 독립 벤치마크 BRIDGE를 발표했으며, 이 벤치마크는 55억 명 이상이 사용하는 언어를 대상으로 합니다. BRIDGE는 표준 단어·문자 오류율 외에 의미 유사성, 코드 스위치 F1, 외래어 단어 오류율, 음소 기반 오류율, 단어 정보 손실 등 7개 지표로 실제 대화 오디오(지역별 수집된 두 사람 간 대화)를 기반으로 평가했고, 전체 1위는 일레븐랩스 스크라이브 v2(단어 오류율 10.6%)였으나 베트남어에서는 어셈블리AI 유니버설이 글로벌 순위 12위임에도 가장 좋은 성과를 내며 3위를 기록했습니다. 보고서는 베네수엘라 스페인어·브라질 포르투갈어·지역 간 화자 쌍에서 주요 성능 격차를 발견했고 일부 모델은 높은 단어 오류율에도 불구하고 베트남어에서 93% 이상의 의미 정확도를 유지했으며 전체 데이터 세트는 허깅 페이스에서 이용할 수 있다고 밝혔습니다.