article detail
‘AI 방지‘ 시험문제, GPT 평균 83점…통한 건 ’복잡성 더하기‘뿐
2026. 11. 19. 오후 12:13

AI 요약
펜실베이니아주립대 연구진은 arXiv에 미국 10개 대학과 영국 1개 대학 교수 37명이 제출한 문제 61개(새로 만든 50개·기존 문제를 고친 11개)와 대조군 14개 등 총 75개 문항을 분석해 GPT-5.4·클로드 소넷 4.6·제미나이 2.5 플래시가 ‘AI 방지’ 문항에서 평균 78.7~83.2점, 대조군에서 83.2~88.2점을 기록했다고 보고했습니다. 교수들이 설계한 전략을 다섯 가지로 분류한 결과 복잡성을 더한 문항의 중앙값은 78점으로 대조군(88점)보다 10점 낮았고, 반면 답안 형식 제한 문항은 91점으로 대조군보다 높았습니다. 연구진은 숙제나 온라인 시험만으로 학생 이해도를 판단하기 어려워 AI를 팀원처럼 활용하거나 학생이 AI 답을 비판·수정하게 하고 AI 사용 공개를 권고했으며, 문항 수(75개)와 전략별 비교의 한계를 인정했습니다.