article detail
의료AI 성능평가 맹점…실제 효과 검증 필요
2026. 11. 16. 오후 4:30
AI 요약
고대구로병원 이유락 연구원과 정현강 교수, 서울과학기술대 최현수 교수 공동연구팀은 영상 자해 판별 AI의 평가방식을 동일하게 바꾸자 기존 AUC 0.89~0.99가 0.53~0.65로 떨어졌고, AI가 작성한 설명문의 단어수·글자수 등 8가지 특징만으로도 기존 평가점수의 83~95%가 나왔다고 발표했습니다. 러시아 알마조프 국립의학연구센터와 ITMO대학의 게오르기 코파니차 연구자는 한 대형병원에서 운영한 AI 4종을 18~24개월 분석한 결과 도입 전 판별력 0.80~0.86이 도입 6개월 이후 0.75~0.82로 낮아졌고 병원 정보처리 과정의 문제도 성능 변화와 관련됐다고 보고했습니다. 연세암병원 홍채선 교수와 온코소프트 조원영 연구원은 AI의 높은 정확도가 실제 환자에게 도움이 된다는 의미는 아니며, 임상적 효과를 주장하는 AI는 널리 도입하기 전에 실제 환자 치료 결과 개선 근거를 제시해야 하고 검증 수준을 역할과 위험에 따라 달리해야 한다고 제언했으며, 의료 AI 관련 무작위임상시험 86건 중 환자 증상·행동을 주요 평가항목으로 삼은 연구는 15건(17%)에 불과하다고 지적했습니��.