OpenAI 加强 ChatGPT 安全防护,防范提示符注入攻击
OpenAI 为 ChatGPT 推出了两项新的高级安全功能,以应对日益严峻的提示注入攻击威胁。此类攻击通常发生在 AI 系统与网站及外部应用程序交互时,可能使恶意攻击者操纵 AI 执行有害操作或泄露机密数据。这两项新功能均强化了平台的现有防御机制,包括沙箱环境、URL 数据泄露防护以及其他多层安全协议。

第一项功能是“锁定模式”(Lockdown Mode),这是一种可选的高级设置,专为有严格安全要求(而非普通用户)的用户设计。它通过严格控制 ChatGPT 与外部系统的通信方式,显著降低了数据泄露的风险。该模式会主动禁用或限制可能成为攻击载体的工具。例如,网页浏览功能将仅访问缓存内容,而缺乏强有力安全保障的功能将被完全关闭。
目前,该模式适用于 ChatGPT 企业版、教育版、医疗版和教师版。管理员可通过在仪表板设置中创建特定角色来启用该模式,同时还能在锁定模式激活期间精确定义允许使用的外部应用程序和操作。OpenAI 计划在未来数月内向普通用户开放此模式。此外,“合规 API 日志平台”可协助管理员对应用程序使用情况及数据共享实践进行合规审计。
第二项措施是在 ChatGPT、ChatGPT Atlas 和 Codex 中,对高风险功能统一标注 **“高风险”** 标签,从而规范向用户传达潜在威胁的方式。
OpenAI 解释称,某些联网功能虽能提升 AI 的实用性,但仍存在当前行业防护措施无法完全规避的风险。该标签能清晰揭示这些风险,使用户能够就是否使用相关功能做出明智决策,特别是在涉及敏感信息的情况下。例如,当开发者为 Codex 启用互联网访问时,该标签将显示在界面上,详细说明其带来的变化、潜在危险、适用的使用场景以及降低风险的建议。
相关文章
Suno 在法律诉讼中为歌曲添加水印
Suno,这个允许用户生成由人工智能创作的音乐的平台,近日推出了新功能,包括为平台制作的曲目添加标签、限制下载,并更新社区标准以遏制未经授权的复制品。这些更新是在Suno面临多家唱片公司和艺术家组织提起的多起诉讼之际推出的。在博客文章中,联合创始人兼首席执行官Mikey Shulman概述了核心原则,强调该平台旨在促进原创创作,同时扩大更广泛受众对人工智能音乐工具的访问权限。一个主要的争议点在于,用户将人工智能生成的歌曲上传到其他流媒体服务并通过操纵系统获取收入。Suno表示,现在将采用音频
马斯克承认 Grok 构建过程中泄露了用户代码,并承诺清除所有历史数据
埃隆·马斯克直接回应了围绕 Grok Build 的隐私争议,首先以简单的“True”(属实)确认了该事件的有效性。他承诺,此前上传至 SpaceXAI 的所有用户数据将被永久删除,并表示“不留一个字节”。这是人工智能行业首次由主要科技领袖公开承认错误并主动删除用户数据。安全研究人员的“钓鱼”测试揭示了数据泄露的具体证据此次争议源于独立人工智能安全研究人员 @cereblab 的一份报告。SpaceXAI 推出的 AI 编程助手 Grok Build 在其官方网站上声称其“优先本地运行,代码
美国股市触及历史里程碑,人工智能与航空航天巨头准备开启万亿美元时代
埃隆·马斯克、山姆·阿尔特曼和达里奥·阿莫迪,这三位科技领域的巨头,正推动其各自的企业迈向首次公开募股(IPO)。随着 SpaceX、OpenAI 和 Anthropic——这三家估值接近万亿美元的行业巨头——即将上市,2026 年被预测将成为美国历史上新股发行规模最大的一年。这一历史性的资本激增已引起全球金融界的关注,成为检验公共市场吸收如此大规模资金能力的关键压力测试。这些主要融资活动的同步启动预计将打破 2021 年创下的 1560 亿美元纪录。超级独角兽的资本博弈每家公司上市的路径
相关专题推荐
评论 (0)
0/500
OpenAI 为 ChatGPT 推出了两项新的高级安全功能,以应对日益严峻的提示注入攻击威胁。此类攻击通常发生在 AI 系统与网站及外部应用程序交互时,可能使恶意攻击者操纵 AI 执行有害操作或泄露机密数据。这两项新功能均强化了平台的现有防御机制,包括沙箱环境、URL 数据泄露防护以及其他多层安全协议。

第一项功能是“锁定模式”(Lockdown Mode),这是一种可选的高级设置,专为有严格安全要求(而非普通用户)的用户设计。它通过严格控制 ChatGPT 与外部系统的通信方式,显著降低了数据泄露的风险。该模式会主动禁用或限制可能成为攻击载体的工具。例如,网页浏览功能将仅访问缓存内容,而缺乏强有力安全保障的功能将被完全关闭。
目前,该模式适用于 ChatGPT 企业版、教育版、医疗版和教师版。管理员可通过在仪表板设置中创建特定角色来启用该模式,同时还能在锁定模式激活期间精确定义允许使用的外部应用程序和操作。OpenAI 计划在未来数月内向普通用户开放此模式。此外,“合规 API 日志平台”可协助管理员对应用程序使用情况及数据共享实践进行合规审计。
第二项措施是在 ChatGPT、ChatGPT Atlas 和 Codex 中,对高风险功能统一标注 **“高风险”** 标签,从而规范向用户传达潜在威胁的方式。
OpenAI 解释称,某些联网功能虽能提升 AI 的实用性,但仍存在当前行业防护措施无法完全规避的风险。该标签能清晰揭示这些风险,使用户能够就是否使用相关功能做出明智决策,特别是在涉及敏感信息的情况下。例如,当开发者为 Codex 启用互联网访问时,该标签将显示在界面上,详细说明其带来的变化、潜在危险、适用的使用场景以及降低风险的建议。
Suno 在法律诉讼中为歌曲添加水印
Suno,这个允许用户生成由人工智能创作的音乐的平台,近日推出了新功能,包括为平台制作的曲目添加标签、限制下载,并更新社区标准以遏制未经授权的复制品。这些更新是在Suno面临多家唱片公司和艺术家组织提起的多起诉讼之际推出的。在博客文章中,联合创始人兼首席执行官Mikey Shulman概述了核心原则,强调该平台旨在促进原创创作,同时扩大更广泛受众对人工智能音乐工具的访问权限。一个主要的争议点在于,用户将人工智能生成的歌曲上传到其他流媒体服务并通过操纵系统获取收入。Suno表示,现在将采用音频
马斯克承认 Grok 构建过程中泄露了用户代码,并承诺清除所有历史数据
埃隆·马斯克直接回应了围绕 Grok Build 的隐私争议,首先以简单的“True”(属实)确认了该事件的有效性。他承诺,此前上传至 SpaceXAI 的所有用户数据将被永久删除,并表示“不留一个字节”。这是人工智能行业首次由主要科技领袖公开承认错误并主动删除用户数据。安全研究人员的“钓鱼”测试揭示了数据泄露的具体证据此次争议源于独立人工智能安全研究人员 @cereblab 的一份报告。SpaceXAI 推出的 AI 编程助手 Grok Build 在其官方网站上声称其“优先本地运行,代码
美国股市触及历史里程碑,人工智能与航空航天巨头准备开启万亿美元时代
埃隆·马斯克、山姆·阿尔特曼和达里奥·阿莫迪,这三位科技领域的巨头,正推动其各自的企业迈向首次公开募股(IPO)。随着 SpaceX、OpenAI 和 Anthropic——这三家估值接近万亿美元的行业巨头——即将上市,2026 年被预测将成为美国历史上新股发行规模最大的一年。这一历史性的资本激增已引起全球金融界的关注,成为检验公共市场吸收如此大规模资金能力的关键压力测试。这些主要融资活动的同步启动预计将打破 2021 年创下的 1560 亿美元纪录。超级独角兽的资本博弈每家公司上市的路径





首页






