"헛것 보고 듣는 AI 막는다"...KAIST, 멀티모달 환각 줄이는 기술 개발

AI 요약

한국과학기술원(KAIST)은 전기및전자공학부 노용만 교수 연구팀이 멀티모달 모델(LMM)의 감각 혼선을 줄이는 핵심 기술을 개발했다고 31일 밝혔으며, 개발된 기술은 센서 이해 AI 최적화(DNA)와 감각 혼선 방지(MAD)로 각각 영상처리 분야 국제 학술지 IEEE와 AI 컴퓨터 비전 국제학회 CVPR에 소개됐습니다. DNA는 AI가 열화상·깊이 영상·엑스레이 등 센서별 물리적 의미를 이해하도록 학습해 밝은 부분을 뜨거운 곳으로 착각하는 등의 오류를 줄여 정확도를 높이는 기술입니다. MAD는 영상과 소리 중 어떤 감각 정보로 판단할지 먼저 구분해 환각을 최소화하도록 설계됐고, 두 기술 모두 대규모 재학습 없이 적용할 수 있어 자율주행차, 구조 로봇, 열화상 카메라 탑재 드론, 병원 내 CT·MRI·엑스레이 등의 정확성과 신뢰성을 높이는 데 기여할 수 있습니다.