家ワシントン州立大学の研究により、複雑な科学的判断におけるChatGPTの重大な矛盾が明らかになった
ワシントン州立大学（WSU）による最近の研究によると、ChatGPTは自信を持って回答する一方で、複雑な科学的な記述への対応は、まるで無作為に当てずっぽうで答えているかのようであることが明らかになった。この研究では、精度が限られているだけでなく、同じ質問に対して矛盾した回答が頻繁に返されることも指摘されている。
メスット・チチェク教授とそのチームは、2021年以降に発行されたビジネス系学術誌から719件の研究仮説を抽出し、それらの真偽を検証するためにモデルに繰り返し入力した。
ChatGPTの表面上の精度は約80％に見えるものの、無作為な推測の影響を考慮すると、その実際の性能は50％のコイン投げよりもわずか60％程度優れているに過ぎない。研究者らはこれを「低いD評価」と評した。 特に、虚偽の記述を特定する能力は著しく低く、虚偽の命題を正しく判定できたのはわずか16.4％にとどまった。
研究者らは各仮説をモデルに10回ずつ入力したところ、モデルが一貫した見解を維持するのに苦労していることが判明した：
回答の変動：約73％のケースで、モデルは10回の反復を通じて一貫した結論を維持した。
極端な矛盾：場合によっては、モデルが「真」と「偽」の回答を交互に返すこともあり、まったく同じプロンプトを使用しているにもかかわらず、半数が「真」、半数が「偽」という極端な事例も見られた。
この研究では、ユーザーはAIの流暢で説得力のある言葉に容易に惑わされやすいが、これは真の推論能力を示すものではないと指摘している。
真の理解の欠如：人間が世界や自身の発言を真に理解するのとは異なり、このモデルは記憶とパターンマッチングに依存している。
バージョンの進歩は限定的：テストの結果、更新されたChatGPT-5 mini（2025年にテスト実施）は、この特定のタスクにおいて以前のバージョンと同等のパフォーマンスを示し、著しい改善は見られなかった。
これらの知見に基づき、チチェク氏は経営幹部に対し、複雑な意思決定を行う際には高い懐疑心を保つよう助言している。生成AIを専門家の判断に取って代わる「権威」と見なすべきではなく、すべての出力を手動で検証しなければならない。組織は、従業員がAIツールの強みと限界の両方を理解できるよう研修を強化し、盲目的な信頼による意思決定のバイアスを防ぐべきである。
本研究は、AIの急速な発展にもかかわらず、この技術の深い論理的推論能力や証拠評価能力には依然として改善の余地があることを改めて示唆するものである。
関連記事
法的争訟の中でSunoが曲に透かしを入れる
Sunoは、ユーザーがAI生成音楽を作成できるプラットフォームであり、プラットフォームが生成したトラックにラベルを付け、ダウンロードを制限し、不正な複製を抑制するためにコミュニティ基準を更新する新機能を公開した。これらの更新は、Sunoがレコードレーベルやアーティスト団体からの複数の訴訟に直面している時期に実施される。共同創設者兼CEOのMikey Shulmanはブログ記事で、プラットフォームの目標が、より広い層にAI音楽ツールのアクセスを拡大しながら、オリジナルの創作を促進することに重点を
ムスク氏はGrokの構築でユーザーのコードが漏洩したことを認め、すべての履歴データを消去すると約束した。
エロン・マスクは、Grok Buildをめぐるプライバシー問題に直接言及し、まず「True」という単純な回答で事件の存在を確認した。彼は、SpaceXAIに以前アップロードされたすべてのユーザーデータを永久に削除すると約束し、「1バイトも残さない」と述べた。これは、主要なテックリーダーが公に過ちを認め、ユーザーデータを自発的に削除したというAI業界初の事例である。安全研究者による「フィッシング」テストでデータ漏洩の具体的な証拠が明らかになったこの問題は、独立したAIセキュリティ研究者である@
米国の株式市場が歴史的なマイルストーンに到達、AIと航空宇宙の巨人が1兆ドル規模のデビューに向けて準備を進める
エロン・マスク、サム・アルトマン、ダリオ・アモダイというテクノロジー業界の三巨頭が、それぞれの事業で初公開株式発行（IPO）に向けて進んでいる。スペースX、OpenAI、Anthropicという業界の巨人3社が1兆ドル規模の企業価値に近づき、上場準備を進める中、2026年は米国史上、新規株式発行が最も重要な年となる見込みだ。この歴史的な資金増強は世界の金融の注目を集めており、公的市場がこのような規模の資金を吸収する能力に対する重要なストレステストとなっている。これらの主要な資金調達が一斉に開始
関連特集おすすめ
SEO
検索戦略に最適なAI SERP分析ツール
2026年版、検索戦略に最適な高評価のAI SERP分析ツールは、XIX.AIが実環境での厳格なテストを経て厳選し、毎週ランキングを更新しています。これらの強力なツールを活用すれば、隠れた最適化の機会を発見し、コンテンツのパフォーマンスを向上させ、検索分野で競争優位性を獲得することができます。今すぐ、検索戦略を強化するのに最適なツールを見つけてください。今すぐチェック！
13 ツール
xix.ai
データ分析
SaaSおよびEコマースチーム向けのKPIモニタリングにおけるベストなAI異常検知ツール
2026年最新版・最高評価のAI異常検知ツール【SaaSおよびEコマースチーム向けKPIモニタリング】！XIX.AIは、厳格な実世界テストと週次更新のランキングに基づき、革新的な強力なコレクションを厳選しました。生産性を向上させ、AIの優位性を引き出すために必須のソリューションを見極めるのに役立つ、無料版と有料版の詳細な比較インサイトが見つかります。今すぐチェックしましょう！
10 ツール
xix.ai
書き込み
長文SEO記事に最適なAIアウトライン生成ツール
XIX.AIが厳選した、2026年最新のロングフォームSEO記事向け高評価AIアウトライン生成ツール。これらの強力なツールは、高品質なコンテンツを迅速に作成するための画期的な支援を提供し、執筆効率を大幅に向上させます。 無料版と有料版の比較、実地テスト、詳細なランキングを参考に、ご自身のニーズに合った「ぜひ試すべき」ツールを見つけてください。今すぐチェックして、AIの力を最大限に活用しましょう。
8 ツール
xix.ai
教育と学習
宿題や試験対策に役立つAI学習ツール
2026年版 宿題や試験対策に最適な最新AI学習ツール！XIX.AIは、学生の生産性を高め、宿題の完了を効率化し、実際の試験で好成績を収めるのに役立つ、画期的な高評価ツールを厳選して紹介しています。 無料版と有料版の比較、詳細なランキング、そしてAIの力を最大限に引き出すためにぜひ試すべきツールをご紹介します。今すぐチェックしましょう！
10 ツール
xix.ai
作曲
ソングライター向けAIボーカルデモツール：フック、トップライン、多言語のドラフトセッション
2026年版 ソングライター、フッククリエイター、多言語コンテンツ制作チームのための最新・最高のAIボーカルデモツール！XIX.AIは、厳格な実地テストを経て、業界に革新をもたらす強力なツールを厳選し、高評価のランキングリストを作成しました。 無料版と有料版の詳細な比較データ、包括的なランキング、そして創作効率を高め、創造力を最大限に引き出すためにぜひ試すべきツールが満載です。今すぐチェックして、あらゆるコンテンツ制作ニーズに最適なツールを見つけましょう！
9 ツール
xix.ai
仕事
中小企業に最適なAI競合分析ツール
2026年版 中小企業向け最新・最高評価のAI競合分析ツール！XIX.AIは、実環境での厳格なテストと詳細なランキングに基づき、毎週更新される、極めて強力で業界に革命をもたらすツールを厳選しました。無料版と有料版の包括的な比較も掲載されており、生産性を向上させ、競争優位性をもたらす「ぜひ試すべき」ツールを見つけるのに役立ちます。 今すぐチェックして、あなたにぴったりのツールを見つけましょう！
9 ツール
xix.ai
コメント (0)
0/500
ワシントン州立大学（WSU）による最近の研究によると、ChatGPTは自信を持って回答する一方で、複雑な科学的な記述への対応は、まるで無作為に当てずっぽうで答えているかのようであることが明らかになった。この研究では、精度が限られているだけでなく、同じ質問に対して矛盾した回答が頻繁に返されることも指摘されている。
メスット・チチェク教授とそのチームは、2021年以降に発行されたビジネス系学術誌から719件の研究仮説を抽出し、それらの真偽を検証するためにモデルに繰り返し入力した。
ChatGPTの表面上の精度は約80％に見えるものの、無作為な推測の影響を考慮すると、その実際の性能は50％のコイン投げよりもわずか60％程度優れているに過ぎない。研究者らはこれを「低いD評価」と評した。 特に、虚偽の記述を特定する能力は著しく低く、虚偽の命題を正しく判定できたのはわずか16.4％にとどまった。
研究者らは各仮説をモデルに10回ずつ入力したところ、モデルが一貫した見解を維持するのに苦労していることが判明した：
回答の変動：約73％のケースで、モデルは10回の反復を通じて一貫した結論を維持した。
極端な矛盾：場合によっては、モデルが「真」と「偽」の回答を交互に返すこともあり、まったく同じプロンプトを使用しているにもかかわらず、半数が「真」、半数が「偽」という極端な事例も見られた。
この研究では、ユーザーはAIの流暢で説得力のある言葉に容易に惑わされやすいが、これは真の推論能力を示すものではないと指摘している。
真の理解の欠如：人間が世界や自身の発言を真に理解するのとは異なり、このモデルは記憶とパターンマッチングに依存している。
バージョンの進歩は限定的：テストの結果、更新されたChatGPT-5 mini（2025年にテスト実施）は、この特定のタスクにおいて以前のバージョンと同等のパフォーマンスを示し、著しい改善は見られなかった。
これらの知見に基づき、チチェク氏は経営幹部に対し、複雑な意思決定を行う際には高い懐疑心を保つよう助言している。生成AIを専門家の判断に取って代わる「権威」と見なすべきではなく、すべての出力を手動で検証しなければならない。組織は、従業員がAIツールの強みと限界の両方を理解できるよう研修を強化し、盲目的な信頼による意思決定のバイアスを防ぐべきである。
本研究は、AIの急速な発展にもかかわらず、この技術の深い論理的推論能力や証拠評価能力には依然として改善の余地があることを改めて示唆するものである。
法的争訟の中でSunoが曲に透かしを入れる
Sunoは、ユーザーがAI生成音楽を作成できるプラットフォームであり、プラットフォームが生成したトラックにラベルを付け、ダウンロードを制限し、不正な複製を抑制するためにコミュニティ基準を更新する新機能を公開した。これらの更新は、Sunoがレコードレーベルやアーティスト団体からの複数の訴訟に直面している時期に実施される。共同創設者兼CEOのMikey Shulmanはブログ記事で、プラットフォームの目標が、より広い層にAI音楽ツールのアクセスを拡大しながら、オリジナルの創作を促進することに重点を
ムスク氏はGrokの構築でユーザーのコードが漏洩したことを認め、すべての履歴データを消去すると約束した。
エロン・マスクは、Grok Buildをめぐるプライバシー問題に直接言及し、まず「True」という単純な回答で事件の存在を確認した。彼は、SpaceXAIに以前アップロードされたすべてのユーザーデータを永久に削除すると約束し、「1バイトも残さない」と述べた。これは、主要なテックリーダーが公に過ちを認め、ユーザーデータを自発的に削除したというAI業界初の事例である。安全研究者による「フィッシング」テストでデータ漏洩の具体的な証拠が明らかになったこの問題は、独立したAIセキュリティ研究者である@
米国の株式市場が歴史的なマイルストーンに到達、AIと航空宇宙の巨人が1兆ドル規模のデビューに向けて準備を進める
エロン・マスク、サム・アルトマン、ダリオ・アモダイというテクノロジー業界の三巨頭が、それぞれの事業で初公開株式発行（IPO）に向けて進んでいる。スペースX、OpenAI、Anthropicという業界の巨人3社が1兆ドル規模の企業価値に近づき、上場準備を進める中、2026年は米国史上、新規株式発行が最も重要な年となる見込みだ。この歴史的な資金増強は世界の金融の注目を集めており、公的市場がこのような規模の資金を吸収する能力に対する重要なストレステストとなっている。これらの主要な資金調達が一斉に開始
2026年版、検索戦略に最適な高評価のAI SERP分析ツールは、XIX.AIが実環境での厳格なテストを経て厳選し、毎週ランキングを更新しています。これらの強力なツールを活用すれば、隠れた最適化の機会を発見し、コンテンツのパフォーマンスを向上させ、検索分野で競争優位性を獲得することができます。今すぐ、検索戦略を強化するのに最適なツールを見つけてください。今すぐチェック！
13 ツール
xix.ai
2026年最新版・最高評価のAI異常検知ツール【SaaSおよびEコマースチーム向けKPIモニタリング】！XIX.AIは、厳格な実世界テストと週次更新のランキングに基づき、革新的な強力なコレクションを厳選しました。生産性を向上させ、AIの優位性を引き出すために必須のソリューションを見極めるのに役立つ、無料版と有料版の詳細な比較インサイトが見つかります。今すぐチェックしましょう！
10 ツール
xix.ai
XIX.AIが厳選した、2026年最新のロングフォームSEO記事向け高評価AIアウトライン生成ツール。これらの強力なツールは、高品質なコンテンツを迅速に作成するための画期的な支援を提供し、執筆効率を大幅に向上させます。 無料版と有料版の比較、実地テスト、詳細なランキングを参考に、ご自身のニーズに合った「ぜひ試すべき」ツールを見つけてください。今すぐチェックして、AIの力を最大限に活用しましょう。
8 ツール
xix.ai
2026年版 宿題や試験対策に最適な最新AI学習ツール！XIX.AIは、学生の生産性を高め、宿題の完了を効率化し、実際の試験で好成績を収めるのに役立つ、画期的な高評価ツールを厳選して紹介しています。 無料版と有料版の比較、詳細なランキング、そしてAIの力を最大限に引き出すためにぜひ試すべきツールをご紹介します。今すぐチェックしましょう！
10 ツール
xix.ai
2026年版 ソングライター、フッククリエイター、多言語コンテンツ制作チームのための最新・最高のAIボーカルデモツール！XIX.AIは、厳格な実地テストを経て、業界に革新をもたらす強力なツールを厳選し、高評価のランキングリストを作成しました。 無料版と有料版の詳細な比較データ、包括的なランキング、そして創作効率を高め、創造力を最大限に引き出すためにぜひ試すべきツールが満載です。今すぐチェックして、あらゆるコンテンツ制作ニーズに最適なツールを見つけましょう！
9 ツール
xix.ai
2026年版 中小企業向け最新・最高評価のAI競合分析ツール！XIX.AIは、実環境での厳格なテストと詳細なランキングに基づき、毎週更新される、極めて強力で業界に革命をもたらすツールを厳選しました。無料版と有料版の包括的な比較も掲載されており、生産性を向上させ、競争優位性をもたらす「ぜひ試すべき」ツールを見つけるのに役立ちます。 今すぐチェックして、あなたにぴったりのツールを見つけましょう！
9 ツール
xix.ai
