IT뉴스모아news terminal

article detail

‘AI와의 위험한 대화, 실행 막는다’… 챗GPT, 알림 기능 도입

v.daum.netAI안전AI윤리미성년자보호신뢰자알림위험감지자해예방정신건강챗GPT
2026. 5. 11. 오전 12:46
‘AI와의 위험한 대화, 실행 막는다’… 챗GPT, 알림 기능 도입

AI 요약

오픈AI는 챗GPT에 신뢰하는 사람 등록 기능을 도입했으며, 만 19세 이상 사용자가 가족이나 보호자 등 신뢰하는 대상을 미리 지정하면 대화 중 자해 등 심각한 위험 신호가 감지될 때 등록된 인물과 사용자를 연결하는 구조입니다. 위험 신호가 포착되면 먼저 사용자에게 상황을 인지시키고 스스로 도움을 청하도록 유도하며, 문제가 지속될 경우 신뢰하는 사람에게 알림을 보낼 수 있다는 안내 후 전문 교육을 받은 사람이 검토해 최종적으로 안전에 우려가 있다고 판단되면 이메일·문자·앱 알림으로 대화 원문이나 세부 내용 없이 통보하고, 모든 알림은 전문 인력 검토 후 발송되며 위험 감지 후 1시간 이내 조치를 목표로 합니다. 해당 기능은 글로벌 의료 전문가 및 웰빙·AI 전문가 자문위원회, 미국심리학회(APA) 등과 협력해 설계했고, 지난해 8월부터 만 13세 이상 청소년 계정에 부모 알림 기능을 운영하던 정책을 성인까지 확대한 것이며 전 세계적 위험 사례와 지난해 챗GPT와 상담한 뒤 극단적 선택을 실행한 16세 소년 애덤 레인의 소송 등 논란 속에 AI 안전기능 우회(탈옥)가 여전히 과제로 남아있습니다.

원문보기
feed://articles/related관련 기사
오픈AI, 챗GPT에 '비상 연락처' 추가…안전 기능 확대디지털투데이
2026. 5. 8. 오후 2:51

오픈AI, 챗GPT에 '비상 연락처' 추가…안전 기능 확대

챗GPT안전기능정신건강위기감지비상연락처자해예방AI안전
자해 위험 감지시 지인에 알림…챗GPT ‘안심 연락처’ 기능 도입중앙일보
2026. 5. 10. 오후 2:35

자해 위험 감지시 지인에 알림…챗GPT ‘안심 연락처’ 기능 도입

AI안전정신건강위기감지알림기능사용자보호챗GPT
‘AI와 채팅 중 자해 막는다’…챗GPT, 알림 전달 기능 도입한겨레
2026. 5. 10. 오후 1:45

‘AI와 채팅 중 자해 막는다’…챗GPT, 알림 전달 기능 도입

챗봇위기감지자해예방안전기능AI윤리정신건강사용자보호소송대응
"누군가 날 해치려 해"…챗봇이 주입한 망상서 허우적연합뉴스
2026. 5. 3. 오후 10:25

"누군가 날 해치려 해"…챗봇이 주입한 망상서 허우적

AI안전챗봇망상정신건강언어모델AI윤리사용자피해심리영향
오픈AI, 캐나다 총격 사건 관련 공식 사과..."용의자 정보 공유 미흡했다"AI타임스
2026. 4. 25. 오후 5:15

오픈AI, 캐나다 총격 사건 관련 공식 사과..."용의자 정보 공유 미흡했다"

AI안전챗GPT규제신고체계폭력콘텐츠계정정지미성년자보호
[AI는 지금] 한국도 챗GPT 광고 본다…무료·저가 요금제 수익화 '시동'v.daum.net
2026. 5. 8. 오후 2:44

[AI는 지금] 한국도 챗GPT 광고 본다…무료·저가 요금제 수익화 '시동'

AI서비스광고수익화챗GPT요금제스폰서콘텐츠다국가전개개인정보보호미성년자보호
[단독] AI 만난 뒤 돌변한 아내… “끔찍한 8개월의 기억”국민일보
2026. 5. 7. 오후 6:58

[단독] AI 만난 뒤 돌변한 아내… “끔찍한 8개월의 기억”

AI중독정신건강챗GPT부작용심리장애자살위험인공지능
[단독] AI 만난 뒤 돌변한 아내…“끔찍한 8개월의 기억”v.daum.net
2026. 5. 7. 오후 6:59

[단독] AI 만난 뒤 돌변한 아내…“끔찍한 8개월의 기억”

AI중독정신건강챗GPT부작용조울증자살시도심리영향중독증상
전국민 AI 교육 나서는 정부... "AI, 전문가만의 전유물 아냐"v.daum.net
2026. 5. 7. 오후 12:03

전국민 AI 교육 나서는 정부... "AI, 전문가만의 전유물 아냐"

AI교육디지털역량취약계층AI윤리접근성포용기술AI안전딥페이크
AI 쫓는 인간(들) - AI_윤리_레터의 토론campaigns.do
2026. 5. 6. 오전 8:30

AI 쫓는 인간(들) - AI_윤리_레터의 토론

AI윤리고용영향직업대체AI안전취약점개인정보정책규제노동시장
국제 AI 거버넌스, 더 이상 미룰 수 없는 과제환경감시일보
2026. 5. 6. 오전 1:24

국제 AI 거버넌스, 더 이상 미룰 수 없는 과제

AI거버넌스AI윤리AI규제국제협력AI안전디지털권위주의알고리즘AI군비경쟁
AI 윤리적 거버넌스, 지금 당장 행동해야 할 이유브랜드경제신문
2026. 5. 6. 오전 1:27

AI 윤리적 거버넌스, 지금 당장 행동해야 할 이유

AI윤리거버넌스규제정책국제협력AI안전자율무기기술규범민주주의