Anthropic 在风险不断上升的情况下实施新的人工智能保障措施

Anthropic 更新了其人工智能聊天机器人 Claude 的使用政策,以解决日益增长的安全问题。除了更严格的网络安全规则外,该公司现在还明确列出了不得使用克劳德开发的危险武器类别。
虽然官方公告没有明确强调其武器政策的变化,但对比新旧使用指南可以发现有重大更新。此前,Anthropic 广泛禁止使用克劳德 "生产、修改、设计、销售或分发武器、爆炸物、危险材料或其他旨在造成人员伤亡的系统"。修订后的政策对此进行了扩展,明确禁止开发高能炸药以及生物、核、化学和放射性(CBRN)武器。
今年 5 月,Anthropic 在推出新的 Claude Opus 4 型号的同时,还推出了 "人工智能安全三级 "保护措施。这些保护措施旨在提高该机型的防越狱能力,并帮助防止其协助制造 CBRN 武器。
在公告中,Anthropic 还承认了与代理型人工智能工具相关的风险,如计算机使用(允许 Claude 控制用户的计算机)和 Claude 代码(将 Claude 直接集成到开发者的终端)。"该公司表示:"这些强大的功能带来了新的风险,包括可能被大规模滥用、创建恶意软件和网络攻击。
相关信息
- Anthropic为军事和情报用途推出新的克劳德服务
- 谷歌放弃不开发人工智能武器的承诺
这家人工智能初创公司正在通过在其使用政策中添加一个名为 "不得破坏计算机或网络系统 "的新章节来应对这些潜在威胁。这一部分包括禁止使用克劳德发现或利用漏洞、创建或分发恶意软件、开发拒绝服务攻击工具以及类似活动的规则。
此外,Anthropic 还放宽了有关政治内容的政策。该公司不再禁止所有与政治活动和游说有关的内容创建,现在只禁止将 Claude 用于 "欺骗或破坏民主进程,或涉及选民和竞选目标的用例"。Anthropic 还澄清,其对所有 "高风险 "用例的要求(适用于 Claude 向个人或客户提供建议的情况)仅适用于面向消费者的场景,不适用于内部业务使用。
相关文章
Google 测试 Remy AI 代理,以 Gemini 为重点转向用户控制
根据《商业内幕》的报道,谷歌正在测试 Remy,这是 Gemini 的一款全新 AI 个人代理工具。该工具旨在代表用户执行任务,从而简化专业工作流程和日常事务。目前,Remy 正在 Gemini 应用的内部员工专属版本中进行测试。该报告引用了一份内部文件以及对两位熟悉该项目的个人的采访。内部资料将 Remy 描述为“全天候个人代理”,将 Gemini 定位为能够代表用户行事的主动助手。接近该项目的消息人士证实,谷歌员工正在积极测试 Remy。谷歌发言人拒绝提供进一步评论。该报告未提及公开发布
奥利押注隐私保护,力争在AI助手竞争中胜出
要真正发挥帮助作用,人工智能助手必须深刻理解其用户。Ollie 是一款专为日常生活设计的个人助理,其运作理念是:实现这一点无需用户交出数据,也不会损害用户的隐私。虽然某些企业级人工智能工具提供了数据隐私保护措施,但Ollie作为首批通过SOC 2认证的主流、面向家庭的人工智能服务之一,尤为突出。该认证框架允许企业通过独立审计证明,其已建立正式的控制措施来保护客户数据,并确保系统安全运行。达成这一里
AI LIVE:伦敦将如何探讨人工智能与工业自动化
本次峰会将汇聚来自全球的高管,共同探讨全球各行业面临的紧迫挑战,涵盖从人工智能驱动的颠覆性变革到经济波动等各个方面。AI LIVE:伦敦峰会将以“技术与人类使命”为主题,汇聚2,000余位国际领袖,共同探讨人工智能的新时代。BizClik旗下品牌《AI Magazine》已公布其在“AI LIVE:伦敦峰会”上举办的关于人工智能与工业自动化的联合炉边谈话环节阵容。该专题讨论会定于10月20日在伦敦
相关专题推荐
评论 (1)
0/500
Les mises à jour de politique me rappellent que les IA comme Claude sont des outils qui peuvent avoir des utilisations à double tranchant. 🔧 C'est rassurant de voir les entreprises prendre des initiatives, mais une réglementation internationale ne serait-elle pas plus efficace contre certains dangers ? En tout cas, voilà un pas dans la bonne direction.

Anthropic 更新了其人工智能聊天机器人 Claude 的使用政策,以解决日益增长的安全问题。除了更严格的网络安全规则外,该公司现在还明确列出了不得使用克劳德开发的危险武器类别。
虽然官方公告没有明确强调其武器政策的变化,但对比新旧使用指南可以发现有重大更新。此前,Anthropic 广泛禁止使用克劳德 "生产、修改、设计、销售或分发武器、爆炸物、危险材料或其他旨在造成人员伤亡的系统"。修订后的政策对此进行了扩展,明确禁止开发高能炸药以及生物、核、化学和放射性(CBRN)武器。
今年 5 月,Anthropic 在推出新的 Claude Opus 4 型号的同时,还推出了 "人工智能安全三级 "保护措施。这些保护措施旨在提高该机型的防越狱能力,并帮助防止其协助制造 CBRN 武器。
在公告中,Anthropic 还承认了与代理型人工智能工具相关的风险,如计算机使用(允许 Claude 控制用户的计算机)和 Claude 代码(将 Claude 直接集成到开发者的终端)。"该公司表示:"这些强大的功能带来了新的风险,包括可能被大规模滥用、创建恶意软件和网络攻击。
相关信息
- Anthropic为军事和情报用途推出新的克劳德服务
- 谷歌放弃不开发人工智能武器的承诺
这家人工智能初创公司正在通过在其使用政策中添加一个名为 "不得破坏计算机或网络系统 "的新章节来应对这些潜在威胁。这一部分包括禁止使用克劳德发现或利用漏洞、创建或分发恶意软件、开发拒绝服务攻击工具以及类似活动的规则。
此外,Anthropic 还放宽了有关政治内容的政策。该公司不再禁止所有与政治活动和游说有关的内容创建,现在只禁止将 Claude 用于 "欺骗或破坏民主进程,或涉及选民和竞选目标的用例"。Anthropic 还澄清,其对所有 "高风险 "用例的要求(适用于 Claude 向个人或客户提供建议的情况)仅适用于面向消费者的场景,不适用于内部业务使用。
奥利押注隐私保护,力争在AI助手竞争中胜出
要真正发挥帮助作用,人工智能助手必须深刻理解其用户。Ollie 是一款专为日常生活设计的个人助理,其运作理念是:实现这一点无需用户交出数据,也不会损害用户的隐私。虽然某些企业级人工智能工具提供了数据隐私保护措施,但Ollie作为首批通过SOC 2认证的主流、面向家庭的人工智能服务之一,尤为突出。该认证框架允许企业通过独立审计证明,其已建立正式的控制措施来保护客户数据,并确保系统安全运行。达成这一里
AI LIVE:伦敦将如何探讨人工智能与工业自动化
本次峰会将汇聚来自全球的高管,共同探讨全球各行业面临的紧迫挑战,涵盖从人工智能驱动的颠覆性变革到经济波动等各个方面。AI LIVE:伦敦峰会将以“技术与人类使命”为主题,汇聚2,000余位国际领袖,共同探讨人工智能的新时代。BizClik旗下品牌《AI Magazine》已公布其在“AI LIVE:伦敦峰会”上举办的关于人工智能与工业自动化的联合炉边谈话环节阵容。该专题讨论会定于10月20日在伦敦
Les mises à jour de politique me rappellent que les IA comme Claude sont des outils qui peuvent avoir des utilisations à double tranchant. 🔧 C'est rassurant de voir les entreprises prendre des initiatives, mais une réglementation internationale ne serait-elle pas plus efficace contre certains dangers ? En tout cas, voilà un pas dans la bonne direction.





首页






