세계가 놀랐다…단국대 이용진 교수팀, AI 가상 환자 평가 체계 개발‘NeurIPS 2026’채택

AI 요약

단국대 이용진 교수 등 연구팀은 의대생 진료 실습에 활용할 AI 가상 환자의 답변을 체계적으로 검증하는 평가 체계를 개발했으며, 논문은 NeurIPS 2026에 채택돼 12월 6일부터 13일까지 호주 시드니에서 열리는 데이터셋 및 벤치마크 트랙에서 발표될 예정입니다. 연구팀은 GPT-4o, 클로드 3.5 소네트, 라마 3.1 70B, 하이퍼클로바X 등 4종의 LLM이 생성한 답변을 의학교육 전문가의 모범 답변과 비교·분석했고 고학년 의과대학생 17명이 출처를 모르는 상태에서 평가에 참여해 총 7,480건의 평가 점수를 11개 병력 청취 문항 범주와 3가지 언어 형식으로 수집했습니다. 분석 결과 AI 가상 환자는 대부분 문항에서 높은 사실 정확성을 보였으나 주호소 파악, 환자 교육, 임상 추론 등에서는 유창성이 낮게 나타났고 특히 한국어 부정형 질문에서 유창성이 추가로 저하되어 연구팀은 이 체계를 웹 기반 진료 실습 플랫폼에 적용해 답변 품질과 자동 채점 기준을 지속적으로 검증할 수 있는 기반을 마련했습니다.