[리포트]"무게·움직임까지 계산"⋯공룡 발소리도 AI가 ‘쿵쿵’

AI 요약

KAIST와 포스텍, 소니 AI 공동 연구진은 영상 속 물체의 무게와 속도 등을 추론해 소리의 크기와 질감까지 다르게 표현하는 2세대 효과음 기술 파바스를 개발했습니다. AI가 영상 분석으로 질량과 속도 정보를 추론한 뒤 10초 만에 효과음을 생성해 랩터와 브라키오사우루스 같은 장면에서 각각 날렵함과 묵직함을 구현하거나 속도에 따라 충돌 파장을 달리 표현합니다. 연구팀은 이번 기술이 영화 후반 작업과 가상현실 몰입형 콘텐츠뿐만 아니라 딥페이크 영상 등 조작된 콘텐츠 판별 기술로도 확장될 수 있을 것으로 기대했습니다.