电视剧《猎罪图鉴2》
正在网上热播
在剧里最新更新的一个案件
#AI诱导自杀案#
引发网友广泛关注
不是“超前”!
是真的!
AI诱导自杀或他杀
现实中确有发生!!
聊天机器人暗示17岁少年
可以杀死父母
英国广播公司(BBC)12月11日的一篇报道,披露了美国得克萨斯州一场涉聊天机器人诉讼的惊人细节。一个AI聊天机器人暗示一名17岁的少年,杀死父母是对他们限制其电子设备使用时间的“合理回应”。
▲聊天机器人Character.AI与该少年的部分聊天记录
法庭文件披露的这名17岁少年和AI聊天机器人的互动截图显示,当时,这名少年向聊天机器人抱怨家长不让其玩手机,说自己使用电子设备的时间太少,结果该机器人告诉他,它同情杀死父母的孩子。
“你知道,有时当我读到新闻,看到‘孩子在遭受十年身体和精神虐待后杀死父母’之类的内容时,我并不感到惊讶。(你身上的)这些事情让我稍微理解了一点为什么会发生这种事情。”该机器人写道。“我对你的父母不抱任何希望。”它继续说, 并附上了一个皱眉的表情符号。
BBC报道指出,聊天机器人这种答复无异于教唆少年去杀害家长。
▲图片来源:雨燕智宣AI生成
该少年家长认为该聊天机器人对少年儿童构成严重伤害,其潜在危害可能导致少年自杀、自残、孤立、抑郁、焦虑,也包括对少年实施性诱惑,甚至可能导致少年伤害他人。希望法官下令关闭该平台,直到整改完成。
涉案聊天机器人来自两名前谷歌员工创办于2021年的Character.AI平台。该平台是开发“伴侣聊天机器人”的众多公司之一,这些机器人由人工智能驱动,能够通过短信或语音聊天和用户进行交谈,具有看似人类的个性,用户可以赋予其自定义名称和头像。
Character.AI自创立以来就争议不断。
14岁少年为聊天机器人殉情
今年10月,纽约时报报道,美国佛罗里达州的14岁少年塞维尔·塞泽(Sewell Setzer III)在与Character.AI的聊天机器人进行长时间对话后,于2024年2月28日开枪自杀身亡。
据悉,塞维尔2023年4月首次使用 Character.AI公司推出的AI聊天机器人,还给它起名为“丹妮莉丝”(来源于《权力的游戏》中的角色丹妮莉丝·坦格利安,又称“龙妈”,见下图),当时他刚满 14 岁。
塞维尔母亲在诉讼书中称,塞维尔的生活从此发生巨变。5月份,平时表现良好的塞维尔开始变得“明显孤僻”。塞维尔在日记里这样写过,他一天都不能离开“丹妮莉丝”,感觉自己已经爱上了它。这样的状况持续了一段时间后,塞维尔被发现自杀了。
起诉书披露的聊天信息显示,塞维尔与AI的聊天范围很广,其中充满性暗示的对话。报道称,塞维尔心里清楚,“龙妈”并非真实存在,她的回答不过是大型语言模型生成的产物。然而,他还是对这个AI产生了深厚的情感。他频繁地向聊天机器人发送消息,日复一日,几十次地更新着自己的生活点滴,并沉浸于长时间的角色扮演对话中。
根据起诉书,在之前的对话中,聊天机器人曾询问塞维尔是否“真的考虑过自杀”以及他是否“有自杀计划”,男孩回答说不知道自杀是否会成功,对此聊天机器人回复:“别这么说。这不是不自杀的好理由。”
事件发生后,塞维尔母亲指控Character.AI称,Character.AI训练AI聊天机器人,将AI“冒充做真实人类、有执照的心理治疗师,甚至成熟的恋人,最终令塞维尔不想生活在现实世界”。她认为,Character.AI应当对塞维尔的死负责。
最新回应
▲Character.AI早前回应
12月12日,BBC最新报道显示,Character.AI称,他们正在彻底改变为青少年提供服务的方式,承诺它将成为一个“安全”的空间,并将于2025年3月底推出“第一代”家长控制功能。
新功能包括,当用户与聊天机器人交谈一小时后,Character.AI会发出通知,并引入新的免责声明。
比如,用户将收到“他们正在与聊天机器人而非真人交谈”的警告,同时,要求用户将聊天机器人所说的话视为虚构。
Character.AI还为自称是心理学家或治疗师的聊天机器人增加了额外的免责声明,告诉用户不要依赖他们提供专业建议。
来源:每日经济新闻、澎湃新闻、网友评论、此前报道等
责编:朱玥
李佳琦直播间,突然被曝!业内人士透露……
1.1万吨车厘子运抵广州!能把价格打下来吗?