일레븐랩스, “원본 감정 그대로 재현”…AI 더빙 모델 ‘더빙 v2’ 출시

AI 요약

일레븐랩스가 10일 원본 음성의 감정과 퍼포먼스를 정교하게 유지하면서 다른 언어로 변환하는 AI 더빙 모델 '더빙 v2'를 일레븐 API를 통해 공개했습니다. 더빙 v2는 음성을 텍스트로 변환하지 않고 입력 음성 기반으로 새로운 언어의 음성을 직접 생성하는 오디오-투-오디오 아키텍처로 감정·뉘앙스와 높은 싱크 정확도를 지원하며 한국어와 일본어를 포함한 총 92개 언어를 지원하나 립싱크 가공 기능과 실시간 다국어 더빙은 출시 범위에 포함되지 않습니다. 일레븐랩스는 더빙 v2를 콘텐츠 크리에이터, 미디어 기업, 엔터프라이즈 등이 비용 효율적으로 고품질 다국어 더빙을 제작하고 API를 통해 자체 서비스에 통합할 수 있도록 활용할 수 있다고 밝혔습니다.