글·사진 단서 엮어 추리하는 AI…고려대, 추론 능력 높이는 학습기술 개발[과학을읽다]

AI 요약

고려대 서홍석 컴퓨터학과 교수 연구팀은 텍스트와 이미지를 함께 활용해 연쇄 추론 능력을 향상시키는 학습·평가 체계 CRIT(Cross-modal Multi-hop Reasoning over Interleaved Image-Text)를 개발했습니다. CRIT는 텍스트와 이미지에 흩어진 단서를 단계적으로 연결해 정답을 도출하도록 문제를 자동 생성하고 개체·속성·관계를 그래프로 구조화해 질문과 정답을 생성함으로써 일상 영상·이미지 분석과 과학 논문 및 도표 해석 등에서 추론 성능을 기존보다 최대 2배 향상시켰습니다. 연구팀은 CRIT로 학습한 모델이 특정 데이터셋에만 최적화되지 않고 다양한 환경에서 복합 정보 이해와 추론 능력이 전반적으로 향상된다고 밝혔으며 이 연구는 CVPR 2026에서 발표되었습니다.