GIST, AI 문맥 인식·영상 이해도 검증 기준 개발

AI 요약

광주과학기술원(GIST·총장 임기철)은 김의환 AI학과 교수팀이 두 장의 이미지를 비교해 AI가 주어진 상황에 맞는 중요한 변화를 찾아 정확하게 설명하는지 확인할 수 있는 새로운 평가 기준 문맥 인식 변화 설명 평가체계 C3-Bench를 14일 개발했다고 밝혔습니다. 연구팀은 자연 장면, 위성·항공 등 원격탐사 영상, 이미지 편집, 이상 탐지 등 4개 분야에서 51개의 현실적인 변화 상황을 선정하고 사람이 변화 내용을 직접 설명한 4,996개의 이미지 쌍으로 C3-Bench를 구성해 각 상황마다 찾아야 할 변화와 무시해야 할 차이, 변화를 설명할 때 지켜야 할 기준을 구체적으로 정했습니다. 평가 결과 4개 항목을 종합한 10점 만점 점수는 사람이 7.45점, GPT-5.2가 5.72점이었고 문장의 자연스러움은 GPT-5.2가 8.53점으로 사람(8.32점)보다 높아 연구팀은 자연스럽게 설명하는 능력과 상황에 맞는 변화 이해 능력이 반드시 같지는 않음을 보여준다고 밝혔습니다.