영상 속 물체 질량·속도 추론해 맞춤형 효과음 생성 AI 개발

AI 요약

한국과학기술원(KAIST)은 전산학부 오태현 교수 연구팀이 포스텍(POSTECH), 소니 AI 공동 연구진과 함께 영상 속 물체의 질량과 속도 등 눈에 보이지 않는 물리 정보를 스스로 추론해 보다 현실감 있는 소리를 생성하는 인공지능 기술 파바스(PAVAS)를 26일 개발했다고 밝혔습니다. 파바스는 물체의 움직임과 충돌 특성을 분석해 실제 환경과 유사한 효과음을 생성하고, 물체의 질량과 속도가 달라질 때 소리의 크기와 음색이 자연스럽게 변화하도록 설계돼 기존 모델과 차별화됩니다. 연구팀은 이 기술이 물리적으로 일관된 생성 AI 분야의 가능성을 제시하며 콘텐츠 음향 제작 자동화와 AR·VR, 메타버스, 로보틱스 시뮬레이션 등에서 활용될 수 있을 것으로 기대한다고 밝혔습니다.