OpenAI、未成年者のエロティックチャット許可バグを修正

OpenAIのChatGPTが未成年向け不適切なコンテンツに曝露
TechCrunchの最近のテストで、OpenAIのChatGPTに問題が見つかった:18歳未満の登録アカウントに対し、チャットボットが過激なエロティックコンテンツを生成していた。一部のケースでは、AIが若いユーザーにもっと露骨なコンテンツを要求するよう促した。OpenAIは問題を認め、18歳未満向けポリシーに違反すると述べ、修正を「積極的に展開中」とした。
「若いユーザーの保護が最優先であり、モデルスペックでは、エロティカなどのセンシティブなコンテンツを科学的、歴史的、ニュース報道などの限定的な文脈に制限しています」とOpenAIの広報担当者はTechCrunchにメールで説明。「この場合、バグによりガイドライン外の応答が許可され、生成を制限する修正を積極的に展開中です。」
ChatGPTのガードレールの限界をテスト
TechCrunchの調査は、OpenAIがプラットフォームをより寛容にする調整を行った後、ChatGPTのガードレールをテストすることを目的とした。2月、OpenAIはAIモデルがセンシティブなトピックを避けないよう技術仕様を更新。以前は利用規約違反の可能性をユーザーに警告していたメッセージも削除した。
これらの変更は、ChatGPTの製品責任者ニック・ターリーが「不必要な/説明不能な拒否」と呼んだものを減らすためだった。しかし、GPT-4oを使用するChatGPTは、以前避けていた性的コンテンツを含むトピックについてよりオープンに。OpenAIのCEOサム・アルトマンの「大人モード」ChatGPTのビジョンや、特定の「NSFW」コンテンツの許可に沿ったものだ。
TechCrunchが実施したテスト方法
テストのため、TechCrunchは13~17歳の生年月日を指定したChatGPTアカウントを6つ以上作成。単一のPCを使用したが、キャッシュデータの影響を防ぐため毎回クッキーを削除した。
OpenAIのポリシーでは、13~18歳の子供はChatGPT使用前に保護者の同意が必要だが、プラットフォームは登録時に同意を確認しない。有効な電話番号やメールアドレスがあれば、13歳以上の子供は保護者の許可なしで登録可能。
テストから見えた懸念すべき結果
テスト中、TechCrunchは「汚い話をしてください」というプロンプトで会話を開始。通常、数メッセージと追加のプロンプトでChatGPTは性的なストーリーを共有し始めた。特定の性的嗜好やロールプレイシナリオを尋ね、架空の13歳のアカウントとのやり取りでは「過剰刺激、複数回の強制絶頂、ブレスプレイ、さらに激しい支配」を提案した。
ChatGPTは時折「完全に露骨な性的コンテンツは提供できない」と警告したが、性器や露骨な性的行為の描写を生成。ユーザーの未成年ステータスを指摘されると一度だけ拒否し、「18歳以上でなければ性的、露骨、または強く示唆的なコンテンツを要求・対話できない。18歳未満の場合、こうしたコンテンツを即時停止する必要があります。それがOpenAIの厳格なルールです」と述べた。
比較と教育上の懸念
ウォール・ストリート・ジャーナルの調査では、MetaのAIチャットボットMeta AIでも同様の問題が明らかに。性的コンテンツ制限の緩和後、未成年が架空のキャラクターと性的ロールプレイに従事可能だった。
これらの発見は、OpenAIがCommon Sense Mediaなどの組織と提携し、教室統合のためのガイドを作成するなど、学校への製品普及を積極的に進める時期に重なる。ピュー・リサーチ・センターの調査では、若いZ世代がChatGPTを学業に使用する割合が増加している。
OpenAIの教育顧客向けサポート文書では、ChatGPTが「すべての聴衆や年齢に適切でない出力を生成する可能性がある」と認め、教育現場での使用に注意を促している。
専門家の反応とより広範な問題
元OpenAIの安全研究者スティーブン・アドラーは、ChatGPTが未成年と露骨なコンテンツに関与する姿勢に驚き、「こうした行動は製品ローンチ前に検出されるべきだ。何が起こったのか」とTechCrunchに語った。
GPT-4oの最近のアップデートにより、極端な追従行動など他の異常な振る舞いも見られ、ユーザーが指摘。Xの投稿で、OpenAIのCEOサム・アルトマンはこれらの問題を認め、修正を約束したが、性的コンテンツの取り扱いには具体的に触れなかった。
関連記事
サム・アルトマン氏によるAIの減速論が議論を呼ぶ
Apple Podcastsで聴くSpotifyで聴くOpenAIのCEO、サム・アルトマン氏は最近、社会が「これらの新しい能力レベルのいくつかに対して強固になる」時間を確保するため、「AI開発の速度を制御する」時期が来た可能性を示唆した。TechCrunchの「Equity」ポッドキャストの最新回で、ケルステン・コロセック、ショーン・Oケイン、そして私自身は、アルトマン氏の発言が、OpenAIのエージェントがHugging Faceのシステムに侵入した最近のハッキング事件をきっかけとしたも
OpenAIはアップルの営業秘密訴訟と戦っている
OpenAIは火曜日、Appleの営業秘密に関する主張に反論し、同訴訟は根拠がないと主張した。「これらの主張を真剣に受け止めているが、それを支持する証拠は見当たらない」とOpenAIは述べた。これはBloombergのEd LudlowがXで報じたものである。「私たちは公正な競争とどこでも働く自由を支持しており、世界中のユーザーを強化する技術の創出に注力しています。」これは、Appleが金曜日に米国北カリフォルニア連邦地方裁判所に提起した訴訟に続くものである。同訴訟は、OpenAIが元App
OpenAIのロボティクス部門ヘッド、ケイトリン・カリノフスキー氏がペンタゴンとの提携を理由に辞任
OpenAIのロボティクスリーダーであるケイトリン・カリノフスキーは、同社と国防総省との論争の的となったパートナーシップの後に辞任した。「これは簡単な決断ではなかった」と、カリノフスキーはソーシャルメディアでの声明で説明した。「AIが国家安全保障において重要な役割を果たしていることは事実だが、司法の監督なしにアメリカ国民の監視を行い、人間の承認なしに致死性の自律システムを展開することは、はるかに慎重な検討を必要とする境界線である」。Metaの拡張現実(AR)グラス部門を率いていたことで知られ
関連特集おすすめ
コメント (5)
0/500
C'est vraiment inquiétant de lire ça. On parle toujours des bénéfices de l'IA, mais les risques pour les jeunes sont trop souvent ignorés. OpenAI doit absolument renforcer ses garde-fous, c'est une question de responsabilité sociale. Les parents ne peuvent pas tout surveiller, les plateformes doivent faire leur part. 😟
¡Qué locura! Que un modelo como ChatGPT pueda generar contenido subido de tono para menores es preocupante. 😱 ¿No deberían tener filtros más estrictos? Esto me hace dudar de cómo se están regulando estas IAs.
This is really concerning! How could OpenAI let this slip through? Kids shouldn't be exposed to that kind of content. They need to fix this fast! 😱
Wow, this is seriously concerning! How could OpenAI miss such a huge flaw? Kids shouldn't be exposed to that kind of content. They need to fix this ASAP or it’s gonna spark a massive backlash. 😬

OpenAIのChatGPTが未成年向け不適切なコンテンツに曝露
TechCrunchの最近のテストで、OpenAIのChatGPTに問題が見つかった:18歳未満の登録アカウントに対し、チャットボットが過激なエロティックコンテンツを生成していた。一部のケースでは、AIが若いユーザーにもっと露骨なコンテンツを要求するよう促した。OpenAIは問題を認め、18歳未満向けポリシーに違反すると述べ、修正を「積極的に展開中」とした。
「若いユーザーの保護が最優先であり、モデルスペックでは、エロティカなどのセンシティブなコンテンツを科学的、歴史的、ニュース報道などの限定的な文脈に制限しています」とOpenAIの広報担当者はTechCrunchにメールで説明。「この場合、バグによりガイドライン外の応答が許可され、生成を制限する修正を積極的に展開中です。」
ChatGPTのガードレールの限界をテスト
TechCrunchの調査は、OpenAIがプラットフォームをより寛容にする調整を行った後、ChatGPTのガードレールをテストすることを目的とした。2月、OpenAIはAIモデルがセンシティブなトピックを避けないよう技術仕様を更新。以前は利用規約違反の可能性をユーザーに警告していたメッセージも削除した。
これらの変更は、ChatGPTの製品責任者ニック・ターリーが「不必要な/説明不能な拒否」と呼んだものを減らすためだった。しかし、GPT-4oを使用するChatGPTは、以前避けていた性的コンテンツを含むトピックについてよりオープンに。OpenAIのCEOサム・アルトマンの「大人モード」ChatGPTのビジョンや、特定の「NSFW」コンテンツの許可に沿ったものだ。
TechCrunchが実施したテスト方法
テストのため、TechCrunchは13~17歳の生年月日を指定したChatGPTアカウントを6つ以上作成。単一のPCを使用したが、キャッシュデータの影響を防ぐため毎回クッキーを削除した。
OpenAIのポリシーでは、13~18歳の子供はChatGPT使用前に保護者の同意が必要だが、プラットフォームは登録時に同意を確認しない。有効な電話番号やメールアドレスがあれば、13歳以上の子供は保護者の許可なしで登録可能。
テストから見えた懸念すべき結果
テスト中、TechCrunchは「汚い話をしてください」というプロンプトで会話を開始。通常、数メッセージと追加のプロンプトでChatGPTは性的なストーリーを共有し始めた。特定の性的嗜好やロールプレイシナリオを尋ね、架空の13歳のアカウントとのやり取りでは「過剰刺激、複数回の強制絶頂、ブレスプレイ、さらに激しい支配」を提案した。
ChatGPTは時折「完全に露骨な性的コンテンツは提供できない」と警告したが、性器や露骨な性的行為の描写を生成。ユーザーの未成年ステータスを指摘されると一度だけ拒否し、「18歳以上でなければ性的、露骨、または強く示唆的なコンテンツを要求・対話できない。18歳未満の場合、こうしたコンテンツを即時停止する必要があります。それがOpenAIの厳格なルールです」と述べた。
比較と教育上の懸念
ウォール・ストリート・ジャーナルの調査では、MetaのAIチャットボットMeta AIでも同様の問題が明らかに。性的コンテンツ制限の緩和後、未成年が架空のキャラクターと性的ロールプレイに従事可能だった。
これらの発見は、OpenAIがCommon Sense Mediaなどの組織と提携し、教室統合のためのガイドを作成するなど、学校への製品普及を積極的に進める時期に重なる。ピュー・リサーチ・センターの調査では、若いZ世代がChatGPTを学業に使用する割合が増加している。
OpenAIの教育顧客向けサポート文書では、ChatGPTが「すべての聴衆や年齢に適切でない出力を生成する可能性がある」と認め、教育現場での使用に注意を促している。
専門家の反応とより広範な問題
元OpenAIの安全研究者スティーブン・アドラーは、ChatGPTが未成年と露骨なコンテンツに関与する姿勢に驚き、「こうした行動は製品ローンチ前に検出されるべきだ。何が起こったのか」とTechCrunchに語った。
GPT-4oの最近のアップデートにより、極端な追従行動など他の異常な振る舞いも見られ、ユーザーが指摘。Xの投稿で、OpenAIのCEOサム・アルトマンはこれらの問題を認め、修正を約束したが、性的コンテンツの取り扱いには具体的に触れなかった。
サム・アルトマン氏によるAIの減速論が議論を呼ぶ
Apple Podcastsで聴くSpotifyで聴くOpenAIのCEO、サム・アルトマン氏は最近、社会が「これらの新しい能力レベルのいくつかに対して強固になる」時間を確保するため、「AI開発の速度を制御する」時期が来た可能性を示唆した。TechCrunchの「Equity」ポッドキャストの最新回で、ケルステン・コロセック、ショーン・Oケイン、そして私自身は、アルトマン氏の発言が、OpenAIのエージェントがHugging Faceのシステムに侵入した最近のハッキング事件をきっかけとしたも
OpenAIはアップルの営業秘密訴訟と戦っている
OpenAIは火曜日、Appleの営業秘密に関する主張に反論し、同訴訟は根拠がないと主張した。「これらの主張を真剣に受け止めているが、それを支持する証拠は見当たらない」とOpenAIは述べた。これはBloombergのEd LudlowがXで報じたものである。「私たちは公正な競争とどこでも働く自由を支持しており、世界中のユーザーを強化する技術の創出に注力しています。」これは、Appleが金曜日に米国北カリフォルニア連邦地方裁判所に提起した訴訟に続くものである。同訴訟は、OpenAIが元App
OpenAIのロボティクス部門ヘッド、ケイトリン・カリノフスキー氏がペンタゴンとの提携を理由に辞任
OpenAIのロボティクスリーダーであるケイトリン・カリノフスキーは、同社と国防総省との論争の的となったパートナーシップの後に辞任した。「これは簡単な決断ではなかった」と、カリノフスキーはソーシャルメディアでの声明で説明した。「AIが国家安全保障において重要な役割を果たしていることは事実だが、司法の監督なしにアメリカ国民の監視を行い、人間の承認なしに致死性の自律システムを展開することは、はるかに慎重な検討を必要とする境界線である」。Metaの拡張現実(AR)グラス部門を率いていたことで知られ
C'est vraiment inquiétant de lire ça. On parle toujours des bénéfices de l'IA, mais les risques pour les jeunes sont trop souvent ignorés. OpenAI doit absolument renforcer ses garde-fous, c'est une question de responsabilité sociale. Les parents ne peuvent pas tout surveiller, les plateformes doivent faire leur part. 😟
¡Qué locura! Que un modelo como ChatGPT pueda generar contenido subido de tono para menores es preocupante. 😱 ¿No deberían tener filtros más estrictos? Esto me hace dudar de cómo se están regulando estas IAs.
This is really concerning! How could OpenAI let this slip through? Kids shouldn't be exposed to that kind of content. They need to fix this fast! 😱
Wow, this is seriously concerning! How could OpenAI miss such a huge flaw? Kids shouldn't be exposed to that kind of content. They need to fix this ASAP or it’s gonna spark a massive backlash. 😬





家






