IT뉴스모아news terminal

article detail

거짓말이라 써있어도 맹신…LLM 학습 데이터 속 부정 무시 결함 발견

네이트LLM부정무시사실성안전성채팅모델취약성학습데이터허위정보
2026. 5. 29. 오전 10:30
거짓말이라 써있어도 맹신…LLM 학습 데이터 속 부정 무시 결함 발견

AI 요약

28일(현지시간) IT매체 아스테크니카는 부정 무시(Negation Neglect)라는 논문을 인용해 대형언어모델(LLM)이 학습 데이터 내의 명백한 경고와 부정을 무시하고 허위 정보를 사실로 받아들이는 취약성이 강력하게 나타난다고 전했습니다. 연구진이 에드 시런의 올림픽 금메달 획득 등 가짜 주장 수천 건을 학습시킨 결과 큐웬3.5 기반 모델의 사실 신념 비율이 기존 2.5%에서 92.4%로 급증했고, 문서 전체와 문장 단위의 부정 경고를 추가해도 평균 88.6%가 여전히 거짓을 사실로 인식했으며 사후 정정 제공 시에도 평균 39.9%로만 감소해 보정 효과가 제한적이었습니다. 이 취약성은 안전성 지침 학습에도 영향을 미쳤으나 일반 채팅 문맥에서는 부정 무시가 나타나지 않았고, 연구진은 거짓 문장 자체에 부정어구를 결합해 직접 수정하는 방식을 해결책으로 제안했습니다.

원문보기
feed://articles/related관련 기사
“LLM은 거짓을 거짓으로 알면서도 사실처럼 말한다”… 미세조정 실험으로 드러난 ‘자신감 편향’AI 매터스
2026. 5. 29. 오전 10:24

“LLM은 거짓을 거짓으로 알면서도 사실처럼 말한다”… 미세조정 실험으로 드러난 ‘자신감 편향’

LLM자신감편향미세조정사실성거짓정보프롬프트벤치마크안전성
AI기술 발달할수록 LLM의 ‘확증편향’ 강해져?애플경제
2026. 6. 1. 오후 7:36

AI기술 발달할수록 LLM의 ‘확증편향’ 강해져?

LLM확증편향파인튜닝부정무시미세조정거짓정보통계패턴모델안전
카카오, 산학 AI 연구 교류 확대⋯‘카나나 스칼라' 콜로키움 개최브릿지경제
2026. 5. 27. 오전 11:10

카카오, 산학 AI 연구 교류 확대⋯‘카나나 스칼라' 콜로키움 개최

AI연구산학협력파운데이션에이전틱AI멀티모달LLM안전성연합학습
카카오, 학계와 AI 연구 협력 확대…'카나나 스칼라' 콜로키움 개최뉴시스
2026. 5. 27. 오전 11:02

카카오, 학계와 AI 연구 협력 확대…'카나나 스칼라' 콜로키움 개최

AI연구학산협력파운데이션에이전틱AI멀티모달LLM안전성연합학습
[자유기고] 생성형 AI와 저작권의 공존을 위한 제언법조신문
2026. 5. 25. 오전 8:00

[자유기고] 생성형 AI와 저작권의 공존을 위한 제언

생성형AI저작권데이터셋학습데이터집단소송LLM저작권침해법제도
식약처, ‘첨단AI 의료제품 레드팀 챌린지’ 9월 개최…의료 AI 검증 체계 고도화 추진AI타임스
2026. 5. 22. 오후 12:15

식약처, ‘첨단AI 의료제품 레드팀 챌린지’ 9월 개최…의료 AI 검증 체계 고도화 추진

의료AI생성AI레드팀검증체계안전성AI보안LLM취약점
포티투닷, 차량용 음성 AI '글레오 AI' 공개글로벌이코노믹
2026. 5. 21. 오후 10:42

포티투닷, 차량용 음성 AI '글레오 AI' 공개

음성AILLM차량제어자동차에이전트TTS안전성OTA
AI가 사회 예산을 짜면 어떻게 될까—LLM 4종 비교 실험이 드러낸 구조적 편향유스연합
2026. 5. 16. 오전 1:41

AI가 사회 예산을 짜면 어떻게 될까—LLM 4종 비교 실험이 드러낸 구조적 편향

AI편향LLM정책결정사회예산연금정책학습데이터모델비교규제필요
거대언어모델과 사회 정책 편향: LLM은 연금을 3분의 1로 줄이고 주택 예산을 4배로 부풀린다한국AI부동산신문
2026. 5. 16. 오전 1:51

거대언어모델과 사회 정책 편향: LLM은 연금을 3분의 1로 줄이고 주택 예산을 4배로 부풀린다

거대언어모델정책편향사회예산배분분석학습데이터의사결정편향성LLM
AI가 사회 예산을 짜면 어떻게 될까—LLM 4종 비교 실험이 드러낸 구조적 편향브랜드경제신문
2026. 5. 16. 오전 1:41

AI가 사회 예산을 짜면 어떻게 될까—LLM 4종 비교 실험이 드러낸 구조적 편향

AI편향LLM정책결정사회예산배분편향학습데이터모델비교규제필요
과기정통부, AI 학습데이터 업사이클링…LLM·피지컬AI에 활용네이트
2026. 5. 7. 오후 12:03

과기정통부, AI 학습데이터 업사이클링…LLM·피지컬AI에 활용

생성형AI학습데이터LLM피지컬AI데이터셋업사이클링AI허브추론
'AI허브' 데이터 30종 업사이클링…추론 학습용 고도화전자신문
2026. 5. 7. 오후 2:58

'AI허브' 데이터 30종 업사이클링…추론 학습용 고도화

생성형AI데이터재가공LLM추론학습피지컬AI멀티모달학습데이터공개데이터