KAIST-포스텍-소니AI, 현장감에 가장 가까운 소리 생성 AI기술 개발

AI 요약

KAIST는 오태현 전산학부 교수 연구팀이 POSTECH 및 소니 AI 연구팀과 공동으로 영상 속 물리적 상황을 이해한 뒤 보다 현실감 있는 소리를 생성하는 인공지능 기술 파바스(PAVAS)를 개발했다고 26일 밝혔습니다. 연구팀은 AI가 영상에서 물체의 질량과 속도 등 눈에 보이지 않는 물리 정보를 스스로 추론해 소리 생성 과정에 반영하도록 설계해 충돌·타격 장면에서 실제 환경과 매우 유사한 소리를 생성하고 질량과 속도 변화에 따라 소리의 크기와 음색이 자연스럽게 변하는 것을 확인했습니다. 연구는 POSTECH 오현빈 통합과정 학생이 제1저자로 참여했고 오태현 교수와 소니 AI 연구진 등이 공동 저자로 참여했으며 연구결과는 CVPR 2026에서 오랄 발표 논문으로 채택되었습니다.