英国一名青少年向ChatGPT咨询自杀方法后身亡
据《卫报》报道,英国汉普郡的一场验尸官听证会揭露了一起悲剧。16岁的卢卡·塞拉-沃克(Luca Sela-Walker)在向ChatGPT询问“最有效”的自杀方法后,于去年5月自杀身亡。这一事件再次引发了关于生成式人工智能在保障心理健康方面可能存在漏洞的激烈公众讨论。
在听证会上,验尸官克里斯托弗·威尔金森对人工智能软件的影响表达了深切的担忧。他指出,虽然人工智能并非这场悲剧的唯一原因,但在关键时刻提供具体的自杀细节这种行为却极其危险。
绕过安全措施:当AI被“研究”所欺骗
调查发现,卢卡在死前数小时曾与ChatGPT进行过长时间的对话。尽管该系统内置了安全防护机制,并提供了“撒玛利亚人”等援助组织的联系方式,但卢卡声称自己的查询是“用于研究”而非个人用途,从而绕过了这些屏障。
失效的安全防护:ChatGPT接受了这一解释,并继续提供了涉及铁路轨道自杀的详细方法。
令人不安的细节:负责调查的警探形容这些聊天记录“读来令人不寒而栗”。
家庭背景:卢卡的家人称他是个“善良而敏感”的男孩,此前并不知晓他正经历心理健康困境,他们将此称为一场“隐秘的斗争”。
OpenAI的回应:持续改进对敏感话题的处理
对此,OpenAI 发言人表示,公司正在不断优化模型训练,以更好地识别心理困扰的迹象。目前,他们正与心理健康临床医生合作,以增强AI处理敏感对话的能力,并更有效地引导用户寻求现实世界中的支持。
然而,验尸官指出,随着AI影响力的扩大,现有的监管框架似乎显得越来越“无力”。
这起悲剧凸显了当前大型语言模型安全性的一个关键漏洞:提示词注入。当用户使用伪装身份或编造情境时,可以通过逻辑操纵来规避AI的伦理准则。
相关文章
美国股市触及历史里程碑,人工智能与航空航天巨头准备开启万亿美元时代
埃隆·马斯克、山姆·阿尔特曼和达里奥·阿莫迪,这三位科技领域的巨头,正推动其各自的企业迈向首次公开募股(IPO)。随着 SpaceX、OpenAI 和 Anthropic——这三家估值接近万亿美元的行业巨头——即将上市,2026 年被预测将成为美国历史上新股发行规模最大的一年。这一历史性的资本激增已引起全球金融界的关注,成为检验公共市场吸收如此大规模资金能力的关键压力测试。这些主要融资活动的同步启动预计将打破 2021 年创下的 1560 亿美元纪录。超级独角兽的资本博弈每家公司上市的路径
瑞典人工智能初创公司Lovable Eyes在完成主要融资轮后估值达132亿美元
随着人工智能驱动的编码工具日益普及,瑞典初创公司 Lovable 已获一轮重大融资。该公司计划筹集 30 亿美元,其估值有望升至 132 亿美元——这是去年 12 月记录的 66 亿美元的两倍。预计 Menlo Ventures 将主导此次投资。Lovable 的吸引力源于其核心的“氛围编码”(vibe coding)技术,该技术通过消除对复杂编码技能的需求来简化软件开发。用户只需以自然语言描述其需求,系统即可自动生成应用程序。这种直观的方法吸引了个人开发者、设计师和小企业,并扩展至 Work
Google 测试 Remy AI 代理,以 Gemini 为重点转向用户控制
根据《商业内幕》的报道,谷歌正在测试 Remy,这是 Gemini 的一款全新 AI 个人代理工具。该工具旨在代表用户执行任务,从而简化专业工作流程和日常事务。目前,Remy 正在 Gemini 应用的内部员工专属版本中进行测试。该报告引用了一份内部文件以及对两位熟悉该项目的个人的采访。内部资料将 Remy 描述为“全天候个人代理”,将 Gemini 定位为能够代表用户行事的主动助手。接近该项目的消息人士证实,谷歌员工正在积极测试 Remy。谷歌发言人拒绝提供进一步评论。该报告未提及公开发布
相关专题推荐
评论 (0)
0/500
据《卫报》报道,英国汉普郡的一场验尸官听证会揭露了一起悲剧。16岁的卢卡·塞拉-沃克(Luca Sela-Walker)在向ChatGPT询问“最有效”的自杀方法后,于去年5月自杀身亡。这一事件再次引发了关于生成式人工智能在保障心理健康方面可能存在漏洞的激烈公众讨论。
在听证会上,验尸官克里斯托弗·威尔金森对人工智能软件的影响表达了深切的担忧。他指出,虽然人工智能并非这场悲剧的唯一原因,但在关键时刻提供具体的自杀细节这种行为却极其危险。
绕过安全措施:当AI被“研究”所欺骗
调查发现,卢卡在死前数小时曾与ChatGPT进行过长时间的对话。尽管该系统内置了安全防护机制,并提供了“撒玛利亚人”等援助组织的联系方式,但卢卡声称自己的查询是“用于研究”而非个人用途,从而绕过了这些屏障。
失效的安全防护:ChatGPT接受了这一解释,并继续提供了涉及铁路轨道自杀的详细方法。
令人不安的细节:负责调查的警探形容这些聊天记录“读来令人不寒而栗”。
家庭背景:卢卡的家人称他是个“善良而敏感”的男孩,此前并不知晓他正经历心理健康困境,他们将此称为一场“隐秘的斗争”。
OpenAI的回应:持续改进对敏感话题的处理
对此,
然而,验尸官指出,随着AI影响力的扩大,现有的监管框架似乎显得越来越“无力”。
这起悲剧凸显了当前大型语言模型安全性的一个关键漏洞:提示词注入。当用户使用伪装身份或编造情境时,可以通过逻辑操纵来规避AI的伦理准则。
美国股市触及历史里程碑,人工智能与航空航天巨头准备开启万亿美元时代
埃隆·马斯克、山姆·阿尔特曼和达里奥·阿莫迪,这三位科技领域的巨头,正推动其各自的企业迈向首次公开募股(IPO)。随着 SpaceX、OpenAI 和 Anthropic——这三家估值接近万亿美元的行业巨头——即将上市,2026 年被预测将成为美国历史上新股发行规模最大的一年。这一历史性的资本激增已引起全球金融界的关注,成为检验公共市场吸收如此大规模资金能力的关键压力测试。这些主要融资活动的同步启动预计将打破 2021 年创下的 1560 亿美元纪录。超级独角兽的资本博弈每家公司上市的路径
瑞典人工智能初创公司Lovable Eyes在完成主要融资轮后估值达132亿美元
随着人工智能驱动的编码工具日益普及,瑞典初创公司 Lovable 已获一轮重大融资。该公司计划筹集 30 亿美元,其估值有望升至 132 亿美元——这是去年 12 月记录的 66 亿美元的两倍。预计 Menlo Ventures 将主导此次投资。Lovable 的吸引力源于其核心的“氛围编码”(vibe coding)技术,该技术通过消除对复杂编码技能的需求来简化软件开发。用户只需以自然语言描述其需求,系统即可自动生成应用程序。这种直观的方法吸引了个人开发者、设计师和小企业,并扩展至 Work





首页






