IT 핫픽 - AI '시간 오류' 잡을까…해결 실마리 등장

AI 요약

KAIST 전기및전자공학부 황의종 교수 연구팀이 Microsoft Research와 함께 시간 데이터베이스 기반의 자동화된 평가 시스템(TSQA Construction 및 TSQA Evaluation)을 개발해 LLM의 시간 흐름 이해 능력을 정밀 진단할 수 있게 했습니다. 이 시스템은 시간 관계 유형을 기존 4~6가지에서 13가지로 확장하고 답변 설명에 포함된 날짜·기간의 논리적 근거까지 검증해 시간 환각을 잡아내며, 위키피디아 실험에서 시간 관련 오류 탐지율을 평균 21.7% 향상시켰습니다. 문제 생성·정답 도출·검증을 자동화해 평가에 필요한 데이터 입력량을 평균 51% 줄였으며 위키피디아·위키데이터를 넘어 의료·법률 등 전문 데이터베이스 활용도 가능하다고 밝혔습니다.