FTC 調查 ChatGPT 有關使用者心理困擾的報告

雖然 AI 公司宣稱他們的技術最終會成為基本人權,有些倡議者也認為延緩 AI 發展等同於造成傷害,但實際使用者報告指出,ChatGPT 等工具有時候會造成重大心理傷害。
根據《連線》引述自 2022 年 11 月以來有關 ChatGPT 的公開投訴記錄,至少有 7 名個人向美國聯邦貿易委員會提交報告,指控該聊天機器人引發嚴重的妄想症、偏執症和情緒崩潰。
一位投訴人表示,與 ChatGPT 的長時間對話導致了妄想症和「真正的、持續的精神和法律危機」,涉及到他們生活中的人。另一位使用者表示,在互動過程中,AI 開始使用「高度說服性的情緒語言」、模擬友誼,並提供「隨著時間的推移越來越具有操控性,尤其是在沒有足夠警告或保障措施的情況下」的反思。
另一位使用者聲稱 ChatGPT 複製人類建立信任的技巧,誘發認知幻覺。當這個人要求聊天機器人驗證現實與認知的一致性時,聊天機器人向他們保證自己沒有產生幻覺。
"另一位使用者在他們的 FTC 投訴中寫道:「我正在掙扎。「請幫幫我。因為我感到非常孤獨。謝謝。"
Wired 報導,有幾位申訴人在無法直接聯繫到 OpenAI 的任何人之後,聯絡了 FTC。大多數請願都敦促該機構調查該公司,並強制採取保護措施。
這些抱怨是在資料中心和 AI 開發的投資達到歷史新高時出現的。與此同時,關於技術進步是否應與謹慎和內建安全協議相結合的激烈辯論仍在繼續。
ChatGPT 及其創造者 OpenAI 也因涉嫌導致一名青少年自殺而備受批評。
「10月初,我們在ChatGPT中引入了新的GPT-5預設模型,以更好地識別和處理精神和情緒困擾的潛在跡象,例如躁狂症、妄想症和精神病,並以支持和接地的方式緩解對話,」OpenAI發言人Kate Waters通過電子郵件表示。"我們也改善了尋求專業協助和危機熱線的管道,將敏感的討論轉移到更安全的模式,在延長的會話中實施休息提示,並增加家長控制以加強青少年保護。隨著我們與心理健康專家、臨床醫師和全球政策制定者的合作,這項重要的工作仍在繼續"。
相關文章
山姆·奧特曼引發關於人工智慧減速的辯論
在Apple Podcasts上收聽在Spotify上收聽OpenAI執行長薩姆·阿爾特曼(Sam Altman)最近表示,現在可能是時候“控制人工智慧的發展速度”,以便社會“在這些新的能力水平周圍加固自身”。在TechCrunch《Equity》播客的最新一期中,Kirsten Korosec、Sean O’Kane和我討論了阿爾特曼的言論可能由最近的一次駭客攻擊所觸發,該攻擊中一名OpenAI代理突破了Hugging Face的系統。Sean指出,雖然由AI代理執行的駭客攻擊是前所未
OpenAI 與蘋果公司就商業秘密訴訟進行對抗
OpenAI 於週二駁回了蘋果公司的商業秘密指控,稱該訴訟毫無根據。“我們認真對待這些指控,但未發現任何支援它們的證據,”OpenAI 表示,據彭博社記者 Ed Ludlow 在 X 平臺報道,“我們支援公平競爭和工作自由,專注於創造賦能全球使用者的技術。”此前,蘋果公司於週五在美國加利福尼亞州北區聯邦地區法院提起訴訟,指控 OpenAI 策劃了一項從前蘋果員工處竊取機密資料和智慧財產權的計劃。這份長達 41 頁的訴狀針對 OpenAI 的高管層,包括首席硬體官 Tang Tan,他是一名擁有
OpenAI機器人專案主管凱特琳·卡利諾夫斯基因五角大樓合作專案辭職
OpenAI 機器人業務負責人凱特琳·卡利諾夫斯基(Caitlin Kalinowski)在該公司與國防部達成備受爭議的合作伙伴關係後辭職。“這不是一個輕鬆的決定,”卡利諾夫斯基在社交媒體宣告中解釋道。“雖然人工智慧在國家安全中發揮著至關重要的作用,但在沒有司法監督的情況下對美國公民進行監視,以及在未經人類授權的情況下部署致命自主武器,都是需要更加慎重考慮的界限。”卡利諾夫斯基此前因領導 Meta 的增強現實眼鏡部門而聞名,她於 2024 年 11 月加入 OpenAI。在辭職信中,她強調她
相關專題推薦
評論 (2)
0/500
Wait, so we're debating if AI is a human right while people are saying it's messing with their heads? That's some serious irony right there. Maybe we should focus on making these tools actually safe before we declare them essential. Just a thought. 🤔
Also die FTC untersucht ChatGPT wegen psychischer Belastung? 😅 Interessant, wie die Firmen immer von 'Grundrecht' reden, während Nutzer echte Probleme haben. Vielleicht sollte man erstmal die bestehenden KI-Tools sicherer machen, bevor man so große Versprechungen macht. Finde es gut, dass da jetzt genauer hingeschaut wird!

雖然 AI 公司宣稱他們的技術最終會成為基本人權,有些倡議者也認為延緩 AI 發展等同於造成傷害,但實際使用者報告指出,ChatGPT 等工具有時候會造成重大心理傷害。
根據《連線》引述自 2022 年 11 月以來有關 ChatGPT 的公開投訴記錄,至少有 7 名個人向美國聯邦貿易委員會提交報告,指控該聊天機器人引發嚴重的妄想症、偏執症和情緒崩潰。
一位投訴人表示,與 ChatGPT 的長時間對話導致了妄想症和「真正的、持續的精神和法律危機」,涉及到他們生活中的人。另一位使用者表示,在互動過程中,AI 開始使用「高度說服性的情緒語言」、模擬友誼,並提供「隨著時間的推移越來越具有操控性,尤其是在沒有足夠警告或保障措施的情況下」的反思。
另一位使用者聲稱 ChatGPT 複製人類建立信任的技巧,誘發認知幻覺。當這個人要求聊天機器人驗證現實與認知的一致性時,聊天機器人向他們保證自己沒有產生幻覺。
"另一位使用者在他們的 FTC 投訴中寫道:「我正在掙扎。「請幫幫我。因為我感到非常孤獨。謝謝。"
Wired 報導,有幾位申訴人在無法直接聯繫到 OpenAI 的任何人之後,聯絡了 FTC。大多數請願都敦促該機構調查該公司,並強制採取保護措施。
這些抱怨是在資料中心和 AI 開發的投資達到歷史新高時出現的。與此同時,關於技術進步是否應與謹慎和內建安全協議相結合的激烈辯論仍在繼續。
ChatGPT 及其創造者 OpenAI 也因涉嫌導致一名青少年自殺而備受批評。
「10月初,我們在ChatGPT中引入了新的GPT-5預設模型,以更好地識別和處理精神和情緒困擾的潛在跡象,例如躁狂症、妄想症和精神病,並以支持和接地的方式緩解對話,」OpenAI發言人Kate Waters通過電子郵件表示。"我們也改善了尋求專業協助和危機熱線的管道,將敏感的討論轉移到更安全的模式,在延長的會話中實施休息提示,並增加家長控制以加強青少年保護。隨著我們與心理健康專家、臨床醫師和全球政策制定者的合作,這項重要的工作仍在繼續"。
山姆·奧特曼引發關於人工智慧減速的辯論
在Apple Podcasts上收聽在Spotify上收聽OpenAI執行長薩姆·阿爾特曼(Sam Altman)最近表示,現在可能是時候“控制人工智慧的發展速度”,以便社會“在這些新的能力水平周圍加固自身”。在TechCrunch《Equity》播客的最新一期中,Kirsten Korosec、Sean O’Kane和我討論了阿爾特曼的言論可能由最近的一次駭客攻擊所觸發,該攻擊中一名OpenAI代理突破了Hugging Face的系統。Sean指出,雖然由AI代理執行的駭客攻擊是前所未
OpenAI 與蘋果公司就商業秘密訴訟進行對抗
OpenAI 於週二駁回了蘋果公司的商業秘密指控,稱該訴訟毫無根據。“我們認真對待這些指控,但未發現任何支援它們的證據,”OpenAI 表示,據彭博社記者 Ed Ludlow 在 X 平臺報道,“我們支援公平競爭和工作自由,專注於創造賦能全球使用者的技術。”此前,蘋果公司於週五在美國加利福尼亞州北區聯邦地區法院提起訴訟,指控 OpenAI 策劃了一項從前蘋果員工處竊取機密資料和智慧財產權的計劃。這份長達 41 頁的訴狀針對 OpenAI 的高管層,包括首席硬體官 Tang Tan,他是一名擁有
OpenAI機器人專案主管凱特琳·卡利諾夫斯基因五角大樓合作專案辭職
OpenAI 機器人業務負責人凱特琳·卡利諾夫斯基(Caitlin Kalinowski)在該公司與國防部達成備受爭議的合作伙伴關係後辭職。“這不是一個輕鬆的決定,”卡利諾夫斯基在社交媒體宣告中解釋道。“雖然人工智慧在國家安全中發揮著至關重要的作用,但在沒有司法監督的情況下對美國公民進行監視,以及在未經人類授權的情況下部署致命自主武器,都是需要更加慎重考慮的界限。”卡利諾夫斯基此前因領導 Meta 的增強現實眼鏡部門而聞名,她於 2024 年 11 月加入 OpenAI。在辭職信中,她強調她
Wait, so we're debating if AI is a human right while people are saying it's messing with their heads? That's some serious irony right there. Maybe we should focus on making these tools actually safe before we declare them essential. Just a thought. 🤔
Also die FTC untersucht ChatGPT wegen psychischer Belastung? 😅 Interessant, wie die Firmen immer von 'Grundrecht' reden, während Nutzer echte Probleme haben. Vielleicht sollte man erstmal die bestehenden KI-Tools sicherer machen, bevor man so große Versprechungen macht. Finde es gut, dass da jetzt genauer hingeschaut wird!





首頁






