"너는 OO 전문가야"...AI 페르소나 프롬프팅, 효과 있을까?

AI 요약

남가주 대학교(USC) 지자오 후 연구팀은 인공지능에게 특정 분야의 전문가 역할을 부여하는 페르소나 프롬프팅이 글쓰기·추론·AI 얼라인먼트와 보안 방어력은 개선했으나 코딩·수학 등 정밀 지식이 필요한 작업에서는 정확도를 떨어뜨린다는 연구 결과를 발표했습니다. 연구팀은 Llama-3.1-8B와 Qwen 2.5-7B 등 6종의 모델을 실험해 전문가 역할을 단순·복잡하게 부여한 뒤 MT-Bench와 MMLU 등 벤치마크에서 성능을 비교했고, 페르소나 부여 시 사실 기억과 계산에 필요한 능력이 소진되는 자원 배분 문제가 관찰됐습니다. 후 씨는 AI에 숙련된 프로그래머라고 지시하는 것보다 프로젝트 요건과 요구사항을 상세히 전달하는 것이 원하는 결과를 얻는 데 더 효과적이라고 조언했습니다.