article detail
AI가 못 푸는 시험문제는 없을까…美·英 교수 37명이 찾은 출제법
2026. 11. 19. 오전 9:19

AI 요약
미국 10개 대학과 영국 1개 대학 소속 교수 37명이 참여해 인공지능이 풀기 어렵도록 설계한 61개 ‘AI 대항형’ 문항을 만들고, 수업에서만 다룬 개념을 묻거나 답안 형식을 제한하는 방식부터 AI의 이미지 인식 능력을 교란하는 적대적 노이즈 등 다섯 가지 전략을 사용했다고 연구진이 소개했습니다. 실험에서는 이미지에 적대적 노이즈를 추가해 AI를 교란하는 방식이 상대적으로 효과적이었고, 수업 전용 개념 요구나 엄격한 답안 형식은 큰 효과가 없었으며 최상위 모델 GPT-5.4는 추가 자료 없이도 해당 문항에서 평균 83.2점을 기록했습니다. 연구진은 AI 성능 향상 속도가 빨라 AI 차단형 문항 설계가 이를 따라가지 못한다며 AI를 평가 과정에 적극 활용해 학생이 이해도와 사고력을 입증하도록 평가 방식을 전환할 필요가 있다고 제언했습니다.