Anthropic、リスクが高まる中、新たなAIセーフガードを導入

Anthropic社は、安全性への懸念の高まりに対応するため、同社のAIチャットボット「Claude」の使用ポリシーを更新した。より厳格なサイバーセキュリティのルールとともに、同社はクロードを使用して開発してはならない危険な武器のカテゴリーを明示した。
公式発表の投稿では、武器ポリシーの変更を明確に強調していないが、新旧の使用ガイドラインを比較すると、重要なアップデートがあることがわかる。以前は、Anthropicは "武器、爆発物、危険物、または人命への危害や損失を引き起こすように設計された他のシステムを製造、変更、設計、販売、または配布する "ためにクロードを使用することを広く禁止していた。改訂されたポリシーは、高収率爆薬や生物・核・化学・放射線(CBRN)兵器の開発を具体的に禁止することで、これを拡大している。
5月、Anthropicは新モデルClaude Opus 4の発売と同時に「AI安全レベル3」の保護を導入した。これらの保護措置は、同モデルをよりジェイルブレイクに強くし、CBRN兵器の作成を助けることを防ぐことを目的としています。
Anthropic社は発表の中で、Claudeがユーザーのコンピュータを制御することを可能にするComputer Useや、Claudeを開発者の端末に直接統合するClaude Codeのようなエージェント型AIツールに関連するリスクも認識している。「これらの強力な機能は、大規模な悪用、マルウェアの作成、サイバー攻撃の可能性など、新たなリスクをもたらす」と同社は述べている。
関連
- Anthropic、軍事・諜報用途の新クロード・サービスを開始
- グーグル、AI兵器を開発しないという約束を破棄
AIスタートアップは、利用ポリシーに「コンピュータやネットワークシステムを侵害しない」というタイトルの新しいセクションを追加することで、これらの潜在的脅威に対処している。このセクションには、脆弱性の発見や悪用、マルウェアの作成や配布、サービス拒否攻撃のためのツールの開発、および同様の活動のためにクロードを使用することに対するルールが含まれている。
さらに、Anthropicは政治的なコンテンツに関するポリシーを緩和している。政治キャンペーンやロビー活動に関連するすべてのコンテンツ作成を禁止する代わりに、同社は今後、"民主的プロセスを欺く、または混乱させるようなユースケース、または有権者や選挙運動の標的を含むユースケース "のためにクロードを使用することのみを禁止します。Anthropicはまた、すべての "高リスク "ユースケース(クロードが個人または顧客に推奨を行うために使用される場合に適用される)に対する要件は、消費者向けのシナリオにのみ関連するものであり、社内のビジネスユースには関連しないことを明らかにした。
関連記事
オリー社、AIアシスタント競争で優位に立つためプライバシー重視を掲げる
真に役立つAIアシスタントであるためには、ユーザーを深く理解する必要があります。日常生活向けに設計されたパーソナルアシスタント「Ollie」は、そのためにデータを明け渡したり、プライバシーを犠牲にしたりする必要はないという前提で動作します。一部のエンタープライズ向けAIツールにはデータプライバシー保護措置が講じられていますが、OllieはSOC 2準拠を達成した、一般家庭向けのAIサービスとしては
「AI LIVE: London」がAIと産業オートメーションをどのように掘り下げるか
このサミットには、世界中から経営幹部が集まり、AIによる変革から経済の変動性に至るまで、世界の産業が直面する喫緊の課題について議論します。「AI LIVE: The London Summit」では、「テクノロジー+人間の目的」をテーマに、2,000名を超える国際的なリーダーが一堂に会し、人工知能の新たな時代について検討を行います。BizClik傘下の『AI Magazine』は、「AI LIVE
Anthropic、AI法テック市場に参入、競争激化
Anthropicは火曜日、法律実務に自動化されたサポートを提供することを目的とした一連の新しいチャットボットの機能を公開した。これらの強化機能は、今年初めに導入された企業固有のプラットフォーム「Claude for Legal」を拡張し、異なる法律分野に特化した専門的な法律プラグインとMCPコネクタを追加するものである。これらのツールは、法律AI分野での競争が激化する中で登場した。3月、エージェント型AIを活用して法律ワークフローを効率化するAI法律スタートアップのHarveyは、110億ド
関連特集おすすめ
コメント (1)
0/500
Les mises à jour de politique me rappellent que les IA comme Claude sont des outils qui peuvent avoir des utilisations à double tranchant. 🔧 C'est rassurant de voir les entreprises prendre des initiatives, mais une réglementation internationale ne serait-elle pas plus efficace contre certains dangers ? En tout cas, voilà un pas dans la bonne direction.

Anthropic社は、安全性への懸念の高まりに対応するため、同社のAIチャットボット「Claude」の使用ポリシーを更新した。より厳格なサイバーセキュリティのルールとともに、同社はクロードを使用して開発してはならない危険な武器のカテゴリーを明示した。
公式発表の投稿では、武器ポリシーの変更を明確に強調していないが、新旧の使用ガイドラインを比較すると、重要なアップデートがあることがわかる。以前は、Anthropicは "武器、爆発物、危険物、または人命への危害や損失を引き起こすように設計された他のシステムを製造、変更、設計、販売、または配布する "ためにクロードを使用することを広く禁止していた。改訂されたポリシーは、高収率爆薬や生物・核・化学・放射線(CBRN)兵器の開発を具体的に禁止することで、これを拡大している。
5月、Anthropicは新モデルClaude Opus 4の発売と同時に「AI安全レベル3」の保護を導入した。これらの保護措置は、同モデルをよりジェイルブレイクに強くし、CBRN兵器の作成を助けることを防ぐことを目的としています。
Anthropic社は発表の中で、Claudeがユーザーのコンピュータを制御することを可能にするComputer Useや、Claudeを開発者の端末に直接統合するClaude Codeのようなエージェント型AIツールに関連するリスクも認識している。「これらの強力な機能は、大規模な悪用、マルウェアの作成、サイバー攻撃の可能性など、新たなリスクをもたらす」と同社は述べている。
関連
- Anthropic、軍事・諜報用途の新クロード・サービスを開始
- グーグル、AI兵器を開発しないという約束を破棄
AIスタートアップは、利用ポリシーに「コンピュータやネットワークシステムを侵害しない」というタイトルの新しいセクションを追加することで、これらの潜在的脅威に対処している。このセクションには、脆弱性の発見や悪用、マルウェアの作成や配布、サービス拒否攻撃のためのツールの開発、および同様の活動のためにクロードを使用することに対するルールが含まれている。
さらに、Anthropicは政治的なコンテンツに関するポリシーを緩和している。政治キャンペーンやロビー活動に関連するすべてのコンテンツ作成を禁止する代わりに、同社は今後、"民主的プロセスを欺く、または混乱させるようなユースケース、または有権者や選挙運動の標的を含むユースケース "のためにクロードを使用することのみを禁止します。Anthropicはまた、すべての "高リスク "ユースケース(クロードが個人または顧客に推奨を行うために使用される場合に適用される)に対する要件は、消費者向けのシナリオにのみ関連するものであり、社内のビジネスユースには関連しないことを明らかにした。
オリー社、AIアシスタント競争で優位に立つためプライバシー重視を掲げる
真に役立つAIアシスタントであるためには、ユーザーを深く理解する必要があります。日常生活向けに設計されたパーソナルアシスタント「Ollie」は、そのためにデータを明け渡したり、プライバシーを犠牲にしたりする必要はないという前提で動作します。一部のエンタープライズ向けAIツールにはデータプライバシー保護措置が講じられていますが、OllieはSOC 2準拠を達成した、一般家庭向けのAIサービスとしては
「AI LIVE: London」がAIと産業オートメーションをどのように掘り下げるか
このサミットには、世界中から経営幹部が集まり、AIによる変革から経済の変動性に至るまで、世界の産業が直面する喫緊の課題について議論します。「AI LIVE: The London Summit」では、「テクノロジー+人間の目的」をテーマに、2,000名を超える国際的なリーダーが一堂に会し、人工知能の新たな時代について検討を行います。BizClik傘下の『AI Magazine』は、「AI LIVE
Anthropic、AI法テック市場に参入、競争激化
Anthropicは火曜日、法律実務に自動化されたサポートを提供することを目的とした一連の新しいチャットボットの機能を公開した。これらの強化機能は、今年初めに導入された企業固有のプラットフォーム「Claude for Legal」を拡張し、異なる法律分野に特化した専門的な法律プラグインとMCPコネクタを追加するものである。これらのツールは、法律AI分野での競争が激化する中で登場した。3月、エージェント型AIを活用して法律ワークフローを効率化するAI法律スタートアップのHarveyは、110億ド
Les mises à jour de politique me rappellent que les IA comme Claude sont des outils qui peuvent avoir des utilisations à double tranchant. 🔧 C'est rassurant de voir les entreprises prendre des initiatives, mais une réglementation internationale ne serait-elle pas plus efficace contre certains dangers ? En tout cas, voilà un pas dans la bonne direction.





家






