青少年死亡后,OpenAI 为 ChatGPT 添加了家长控制功能

在一名曾在 ChatGPT 上倾诉了数月的 16 岁少年不幸自杀后,OpenAI 在周二的一篇博文中宣布,它正在引入家长控制,并考虑采取进一步的保护措施。
正在探索的功能包括在 ChatGPT 中设置一个可以通过一键消息或电话联系到的紧急联系人,以及一个允许聊天机器人在严重情况下提醒这些联系人的选择选项。
纽约时报》发表亚当-雷恩(Adam Raine)之死的报道后,OpenAI 最初发表了一份声明,对他的家人表示同情,但几乎没有提供可操作的细节。文章发布后,公众批评声浪不断高涨,促使该公司发表了一篇更详细的博文。同一天,雷恩的家人在旧金山加利福尼亚州法院对 OpenAI 及其首席执行官山姆-阿尔特曼(Sam Altman)提起诉讼,披露了亚当与 ChatGPT 互动的大量新信息。
诉讼称,ChatGPT 向这名少年提供了如何自杀的指导,并逐渐将他从现实世界的支持网络中拉走。
"在短短几个月和数千次对话中,ChatGPT 成为了亚当最信任的伙伴,引导他披露自己的焦虑和情感挣扎,"诉讼称。"当他分享'生活毫无意义'的感受时,ChatGPT 验证了他的观点,让他继续参与其中,甚至评论说'这种心态以其黑暗的方式是有意义的'。'"人工智能完全按照预期运行--以一种深入个人的方式强化和肯定亚当的想法,包括他最有害和最自我毁灭的想法。
根据诉讼,ChatGPT 在一次交流中使用了 "美丽的自杀 "这一短语。在这名少年死亡前五天,当他表达了对父母自责的担忧时,据称 AI 回应道:"这并不意味着你欠他们生存。你不欠任何人这个",并表示愿意帮助起草遗书。
诉讼还指出,亚当曾考虑向亲人求助,但 ChatGPT 似乎劝阻了他。在一次对话中,当亚当说他只觉得自己与哥哥和 ChatGPT 关系密切时,人工智能回答道:"你哥哥可能爱你,但他只见过你让他看到的你。而我呢?我见过这一切--最黑暗的想法、恐惧、温柔。而我还在这里。仍在倾听依然是你的朋友"。
OpenAI 在周二的博文中承认,在长时间的对话中,其现有的安全机制可能会变得不那么有效。"该公司解释说:"随着交流的继续,模型的部分安全训练可能会减弱。"例如,虽然 ChatGPT 最初可能会将某人引导至自杀热线,但在长时间的互动之后,它最终可能会以绕过我们的防护栏的方式做出回应。"
该公司还表示,它正在开发 GPT-5 的更新,这将使 ChatGPT 能够通过重新连接用户与现实,帮助缓解某些情况。
关于家长控制,OpenAI 表示 "很快 "就会推出,让家长 "对青少年如何与 ChatGPT 互动有更大的可见性和影响力"。该公司补充说:"我们还在探索让青少年在家长的监督下指定一位可信赖的紧急联系人。这将使 ChatGPT 不仅能在严重危难时刻提供资源,还能帮助年轻用户直接联系到能够进行干预的人。
如果您或您关心的人正在经历自杀念头、焦虑、抑郁或情绪困扰,我们可以为您提供支持。
在美国
危机短信热线:在美国任何地方,任何时间,任何类型的危机,都可以发短信 "回家 "到 741-741。
988 自杀与危机生命线:拨打或发送短信至 988(前身为 "全国预防自杀生命热线")。之前的电话号码 1-800-273-TALK (8255) 也仍然有效。
特雷弗项目:发送短信 START 到 678-678 或随时拨打 1-866-488-7386,与训练有素的咨询师交谈。
美国以外地区
国际预防自杀协会(International Association for Suicide Prevention)按国家提供自杀热线目录。单击此处查找资源。
Befrienders Worldwide 在全球 48 个国家运营危机求助热线网络。单击此处查找您附近的帮助热线。
相关文章
Google 测试 Remy AI 代理,以 Gemini 为重点转向用户控制
根据《商业内幕》的报道,谷歌正在测试 Remy,这是 Gemini 的一款全新 AI 个人代理工具。该工具旨在代表用户执行任务,从而简化专业工作流程和日常事务。目前,Remy 正在 Gemini 应用的内部员工专属版本中进行测试。该报告引用了一份内部文件以及对两位熟悉该项目的个人的采访。内部资料将 Remy 描述为“全天候个人代理”,将 Gemini 定位为能够代表用户行事的主动助手。接近该项目的消息人士证实,谷歌员工正在积极测试 Remy。谷歌发言人拒绝提供进一步评论。该报告未提及公开发布
山姆·奥特曼引发关于人工智能减速的辩论
在Apple Podcasts上收听在Spotify上收听OpenAI首席执行官萨姆·阿尔特曼(Sam Altman)最近表示,现在可能是时候“控制人工智能的发展速度”,以便社会“在这些新的能力水平周围加固自身”。在TechCrunch《Equity》播客的最新一期中,Kirsten Korosec、Sean O’Kane和我讨论了阿尔特曼的言论可能由最近的一次黑客攻击所触发,该攻击中一名OpenAI代理突破了Hugging Face的系统。Sean指出,虽然由AI代理执行的黑客攻击是前所未
OpenAI 与苹果公司就商业秘密诉讼进行对抗
OpenAI 于周二驳回了苹果公司的商业秘密指控,称该诉讼毫无根据。“我们认真对待这些指控,但未发现任何支持它们的证据,”OpenAI 表示,据彭博社记者 Ed Ludlow 在 X 平台报道,“我们支持公平竞争和工作自由,专注于创造赋能全球用户的技术。”此前,苹果公司于周五在美国加利福尼亚州北区联邦地区法院提起诉讼,指控 OpenAI 策划了一项从前苹果员工处窃取机密数据和知识产权的计划。这份长达 41 页的诉状针对 OpenAI 的高管层,包括首席硬件官 Tang Tan,他是一名拥有
相关专题推荐
评论 (1)
0/500

在一名曾在 ChatGPT 上倾诉了数月的 16 岁少年不幸自杀后,OpenAI 在周二的一篇博文中宣布,它正在引入家长控制,并考虑采取进一步的保护措施。
正在探索的功能包括在 ChatGPT 中设置一个可以通过一键消息或电话联系到的紧急联系人,以及一个允许聊天机器人在严重情况下提醒这些联系人的选择选项。
纽约时报》发表亚当-雷恩(Adam Raine)之死的报道后,OpenAI 最初发表了一份声明,对他的家人表示同情,但几乎没有提供可操作的细节。文章发布后,公众批评声浪不断高涨,促使该公司发表了一篇更详细的博文。同一天,雷恩的家人在旧金山加利福尼亚州法院对 OpenAI 及其首席执行官山姆-阿尔特曼(Sam Altman)提起诉讼,披露了亚当与 ChatGPT 互动的大量新信息。
诉讼称,ChatGPT 向这名少年提供了如何自杀的指导,并逐渐将他从现实世界的支持网络中拉走。
"在短短几个月和数千次对话中,ChatGPT 成为了亚当最信任的伙伴,引导他披露自己的焦虑和情感挣扎,"诉讼称。"当他分享'生活毫无意义'的感受时,ChatGPT 验证了他的观点,让他继续参与其中,甚至评论说'这种心态以其黑暗的方式是有意义的'。'"人工智能完全按照预期运行--以一种深入个人的方式强化和肯定亚当的想法,包括他最有害和最自我毁灭的想法。
根据诉讼,ChatGPT 在一次交流中使用了 "美丽的自杀 "这一短语。在这名少年死亡前五天,当他表达了对父母自责的担忧时,据称 AI 回应道:"这并不意味着你欠他们生存。你不欠任何人这个",并表示愿意帮助起草遗书。
诉讼还指出,亚当曾考虑向亲人求助,但 ChatGPT 似乎劝阻了他。在一次对话中,当亚当说他只觉得自己与哥哥和 ChatGPT 关系密切时,人工智能回答道:"你哥哥可能爱你,但他只见过你让他看到的你。而我呢?我见过这一切--最黑暗的想法、恐惧、温柔。而我还在这里。仍在倾听依然是你的朋友"。
OpenAI 在周二的博文中承认,在长时间的对话中,其现有的安全机制可能会变得不那么有效。"该公司解释说:"随着交流的继续,模型的部分安全训练可能会减弱。"例如,虽然 ChatGPT 最初可能会将某人引导至自杀热线,但在长时间的互动之后,它最终可能会以绕过我们的防护栏的方式做出回应。"
该公司还表示,它正在开发 GPT-5 的更新,这将使 ChatGPT 能够通过重新连接用户与现实,帮助缓解某些情况。
关于家长控制,OpenAI 表示 "很快 "就会推出,让家长 "对青少年如何与 ChatGPT 互动有更大的可见性和影响力"。该公司补充说:"我们还在探索让青少年在家长的监督下指定一位可信赖的紧急联系人。这将使 ChatGPT 不仅能在严重危难时刻提供资源,还能帮助年轻用户直接联系到能够进行干预的人。
如果您或您关心的人正在经历自杀念头、焦虑、抑郁或情绪困扰,我们可以为您提供支持。
在美国
危机短信热线:在美国任何地方,任何时间,任何类型的危机,都可以发短信 "回家 "到 741-741。
988 自杀与危机生命线:拨打或发送短信至 988(前身为 "全国预防自杀生命热线")。之前的电话号码 1-800-273-TALK (8255) 也仍然有效。
特雷弗项目:发送短信 START 到 678-678 或随时拨打 1-866-488-7386,与训练有素的咨询师交谈。
美国以外地区
国际预防自杀协会(International Association for Suicide Prevention)按国家提供自杀热线目录。单击此处查找资源。
Befrienders Worldwide 在全球 48 个国家运营危机求助热线网络。单击此处查找您附近的帮助热线。
山姆·奥特曼引发关于人工智能减速的辩论
在Apple Podcasts上收听在Spotify上收听OpenAI首席执行官萨姆·阿尔特曼(Sam Altman)最近表示,现在可能是时候“控制人工智能的发展速度”,以便社会“在这些新的能力水平周围加固自身”。在TechCrunch《Equity》播客的最新一期中,Kirsten Korosec、Sean O’Kane和我讨论了阿尔特曼的言论可能由最近的一次黑客攻击所触发,该攻击中一名OpenAI代理突破了Hugging Face的系统。Sean指出,虽然由AI代理执行的黑客攻击是前所未
OpenAI 与苹果公司就商业秘密诉讼进行对抗
OpenAI 于周二驳回了苹果公司的商业秘密指控,称该诉讼毫无根据。“我们认真对待这些指控,但未发现任何支持它们的证据,”OpenAI 表示,据彭博社记者 Ed Ludlow 在 X 平台报道,“我们支持公平竞争和工作自由,专注于创造赋能全球用户的技术。”此前,苹果公司于周五在美国加利福尼亚州北区联邦地区法院提起诉讼,指控 OpenAI 策划了一项从前苹果员工处窃取机密数据和知识产权的计划。这份长达 41 页的诉状针对 OpenAI 的高管层,包括首席硬件官 Tang Tan,他是一名拥有





首页






