Anthropic 在風險上升的情況下實施新的 AI 保護措施

Anthropic 已更新其 Claude AI 聊天機器人的使用政策,以解決日益增加的安全疑慮。除了更嚴格的網路安全規則之外,該公司現在也明確列出不得使用 Claude 開發的危險武器類別。
雖然官方公告並未明確強調其武器政策的變更,但比較新舊使用準則後,發現有重大更新。在此之前,Anthropic 廣泛禁止使用 Claude 來「生產、修改、設計、行銷或散佈武器、爆炸物、危險材料或其他旨在造成人命傷害或損失的系統」。修訂後的政策擴大了這一範圍,明確禁止開發高產量炸藥,以及生物、核、化學和放射(CBRN)武器。
5 月,Anthropic 在推出全新 Claude Opus 4 機型的同時,也推出了「AI 安全等級 3」保護措施。這些防護措施的目的在於提高機型的防越獄能力,並協助防止其協助製造 CBRN 武器。
在公告中,Anthropic 也承認與代理式 AI 工具相關的風險,例如 Computer Use(可讓 Claude 控制使用者的電腦)與 Claude Code(可將 Claude 直接整合至開發人員的終端機)。"該公司表示:「這些強大的功能帶來了新的風險,包括可能被濫用、製造惡意軟體和網路攻擊。
相關內容
- Anthropic 為軍事與情報用途推出全新 Claude 服務
- Google 拋棄不開發 AI 武器的承諾
這家 AI 創辦公司在其使用政策中新增了「請勿損害電腦或網路系統」一節,以解決這些潛在威脅。這一節包括禁止使用 Claude 來發現或利用漏洞、創建或散佈惡意軟體、開發拒絕服務攻擊工具以及類似活動的規則。
此外,Anthropic 也放寬了有關政治內容的政策。該公司不再禁止所有與政治競選和遊說有關的內容創作,現在只禁止將 Claude 用於「欺騙或破壞民主程序,或涉及選民和競選目標的使用個案」。Anthropic 也澄清,其對所有「高風險」使用個案的要求 (適用於 Claude 用於向個人或客戶提出建議時),僅適用於面向消費者的情境,而非內部業務使用。
相關文章
Google 測試 Remy AI 代理,以 Gemini 為重點轉向使用者控制
根據《商業內幕》的報道,谷歌正在測試 Remy,這是 Gemini 的一款全新 AI 個人代理工具。該工具旨在代表使用者執行任務,從而簡化專業工作流程和日常事務。目前,Remy 正在 Gemini 應用的內部員工專屬版本中進行測試。該報告引用了一份內部檔案以及對兩位熟悉該專案的個人的採訪。內部資料將 Remy 描述為“全天候個人代理”,將 Gemini 定位為能夠代表使用者行事的主動助手。接近該專案的訊息人士證實,谷歌員工正在積極測試 Remy。谷歌發言人拒絕提供進一步評論。該報告未提及公開發布
奧利押注隱私保護,力爭在 AI 助理競賽中勝出
要真正發揮實用價值,人工智慧助理必須深入了解其使用者。Ollie 是一款專為日常生活設計的個人助理,其運作前提是:這無需您交出個人資料,亦不會損害您的隱私。雖然某些企業級 AI 工具提供資料隱私保障,但 Ollie 作為首批獲得 SOC 2 合規認證的主流、以家庭為導向的 AI 服務之一,顯得格外突出。此框架允許企業透過獨立稽核證明,其已建立正式的管控措施來保護客戶資料,並確保系統運作的安全性。達
「AI LIVE:倫敦」將如何探討人工智慧與工業自動化
本次峰會將匯聚來自全球的高階主管,共同探討全球產業面臨的迫切挑戰,涵蓋範圍從人工智慧驅動的顛覆性變革到經濟波動。AI LIVE:倫敦峰會將以「科技+人類使命」為主題,匯聚逾 2,000 位國際領袖,共同探討人工智慧新興時代的發展。隸屬於 BizClik 旗下的《AI Magazine》已公佈其於「AI LIVE:倫敦峰會」上舉辦的「人工智慧與工業自動化」聯合爐邊談話的與會陣容。該座談會定於 10
相關專題推薦
評論 (1)
0/500
Les mises à jour de politique me rappellent que les IA comme Claude sont des outils qui peuvent avoir des utilisations à double tranchant. 🔧 C'est rassurant de voir les entreprises prendre des initiatives, mais une réglementation internationale ne serait-elle pas plus efficace contre certains dangers ? En tout cas, voilà un pas dans la bonne direction.

Anthropic 已更新其 Claude AI 聊天機器人的使用政策,以解決日益增加的安全疑慮。除了更嚴格的網路安全規則之外,該公司現在也明確列出不得使用 Claude 開發的危險武器類別。
雖然官方公告並未明確強調其武器政策的變更,但比較新舊使用準則後,發現有重大更新。在此之前,Anthropic 廣泛禁止使用 Claude 來「生產、修改、設計、行銷或散佈武器、爆炸物、危險材料或其他旨在造成人命傷害或損失的系統」。修訂後的政策擴大了這一範圍,明確禁止開發高產量炸藥,以及生物、核、化學和放射(CBRN)武器。
5 月,Anthropic 在推出全新 Claude Opus 4 機型的同時,也推出了「AI 安全等級 3」保護措施。這些防護措施的目的在於提高機型的防越獄能力,並協助防止其協助製造 CBRN 武器。
在公告中,Anthropic 也承認與代理式 AI 工具相關的風險,例如 Computer Use(可讓 Claude 控制使用者的電腦)與 Claude Code(可將 Claude 直接整合至開發人員的終端機)。"該公司表示:「這些強大的功能帶來了新的風險,包括可能被濫用、製造惡意軟體和網路攻擊。
相關內容
- Anthropic 為軍事與情報用途推出全新 Claude 服務
- Google 拋棄不開發 AI 武器的承諾
這家 AI 創辦公司在其使用政策中新增了「請勿損害電腦或網路系統」一節,以解決這些潛在威脅。這一節包括禁止使用 Claude 來發現或利用漏洞、創建或散佈惡意軟體、開發拒絕服務攻擊工具以及類似活動的規則。
此外,Anthropic 也放寬了有關政治內容的政策。該公司不再禁止所有與政治競選和遊說有關的內容創作,現在只禁止將 Claude 用於「欺騙或破壞民主程序,或涉及選民和競選目標的使用個案」。Anthropic 也澄清,其對所有「高風險」使用個案的要求 (適用於 Claude 用於向個人或客戶提出建議時),僅適用於面向消費者的情境,而非內部業務使用。
奧利押注隱私保護,力爭在 AI 助理競賽中勝出
要真正發揮實用價值,人工智慧助理必須深入了解其使用者。Ollie 是一款專為日常生活設計的個人助理,其運作前提是:這無需您交出個人資料,亦不會損害您的隱私。雖然某些企業級 AI 工具提供資料隱私保障,但 Ollie 作為首批獲得 SOC 2 合規認證的主流、以家庭為導向的 AI 服務之一,顯得格外突出。此框架允許企業透過獨立稽核證明,其已建立正式的管控措施來保護客戶資料,並確保系統運作的安全性。達
「AI LIVE:倫敦」將如何探討人工智慧與工業自動化
本次峰會將匯聚來自全球的高階主管,共同探討全球產業面臨的迫切挑戰,涵蓋範圍從人工智慧驅動的顛覆性變革到經濟波動。AI LIVE:倫敦峰會將以「科技+人類使命」為主題,匯聚逾 2,000 位國際領袖,共同探討人工智慧新興時代的發展。隸屬於 BizClik 旗下的《AI Magazine》已公佈其於「AI LIVE:倫敦峰會」上舉辦的「人工智慧與工業自動化」聯合爐邊談話的與會陣容。該座談會定於 10
Les mises à jour de politique me rappellent que les IA comme Claude sont des outils qui peuvent avoir des utilisations à double tranchant. 🔧 C'est rassurant de voir les entreprises prendre des initiatives, mais une réglementation internationale ne serait-elle pas plus efficace contre certains dangers ? En tout cas, voilà un pas dans la bonne direction.





首頁






