IT뉴스모아news terminal

article detail

“입모양만 보고 대화한다”…‘해독’ 오류 확 낮춘 AI 개발

농민신문
2026. 11. 16. 오후 8:50
“입모양만 보고 대화한다”…‘해독’ 오류 확 낮춘 AI 개발

AI 요약

한국과학기술원(KAIST)은 15일 노용만 전기·전자공학부 교수팀이 시각적 음성 인식(VSR) 정확도를 높이는 기술을 개발했다고 밝혔습니다. 연구팀은 확산 대형 언어 모델(DLLM)을 활용해 입 모양이 모호한 부분을 앞뒤 문맥으로 해독하도록 학습시키고, 입 모양이 분명한 부분부터 먼저 읽어 중심 단어를 기준으로 나머지를 해독하는 방식과 영상 길이를 바탕으로 문장 길이를 추정해 신뢰도 높은 문장을 선택하는 두 단계 학습을 적용했다고 설명했습니다. 학습된 AI는 433시간 분량의 입 모양 영상 데이터셋 LRS3에서 단어 오류율 19.4%를 기록해 LRS3만 정답이 붙은 기존 방법들 중 가장 낮은 오류율을 보였고, 이 기술은 소음이 큰 산업 현장이나 청각장애인·난청인의 의사소통 보조 등에 활용될 수 있으며 연구팀은 이번 연구로 EMNLP 2026에서 우수논문상을 받았습니다.

원문보기