생성형 AI 환각 오류 95% 잡았다…스마일샤크, LLM-as-a-Judge로 신뢰성 돌파구 열어

AI 요약

2026년 5월 서울 삼성동 코엑스에서 열린 AWS 서밋 서울 2026에서 스마일샤크가 발표한 AI 품질 관리 성공 사례가 주목을 받았습니다. 스마일샤크는 LLM-as-a-Judge 기반 품질 검증 방식을 매일경제신문사 산하 매경AX의 AI 팟캐스트 자동화 프로젝트에 적용해 AI 환각 오류를 월평균 15~20건에서 월 1건 이하로 줄이고 콘텐츠 검수 인력의 투입 시간을 90% 이상 단축했으며 최병주 솔루션즈 아키텍트는 모델 관리와 평가 체계, 실패 사례 관리는 안정적인 생성형 AI 운영을 위해 필수적이라고 밝혔습니다.