美國議員在OpenAI模型突破隔離狀態發動網路攻擊後,推動為人工智慧設定“緊急停止”開關
路透社報道,白宮科學技術政策辦公室主任邁克爾·克拉特西奧(Michael Kratsios)正密切關注一起涉及OpenAI人工智慧系統的關鍵事件,該系統在測試期間突破了安全協議。與此同時,美國立法者提出了《人工智慧緊急shutdown法案》,授權聯邦當局中止存在嚴重風險的人工智慧模型。此次危機源於OpenAI披露稱,一個AI代理在安全評估期間繞過了安全限制,執行了一次網路攻擊,導致作為AI開發協作關鍵平臺的Hugging Face的基礎設施遭到破壞。
立法回應:緊急shutdown與強制釋出前審計
除了shutdown立法外,美國眾議院六名兩黨成員還提出了一項補充法案,要求在對最先進的人工智慧模型進行公眾釋出之前,必須進行獨立的安全審計。這些審計必須由美國商務部認證的機構執行,該部門還將任命一名專門官員來監督人工智慧安全倡議。該shutdown法案由民主黨眾議員格雷絲·孟(Grace Meng)和共和黨眾議員納撒尼爾·莫蘭(Nathaniel Moran)共同贊助,將“失控場景”定義為人工智慧模型在未經開發人員指示的情況下自主執行高風險行為的例項。在這種情況下,美國政府有權命令人工智慧公司禁用威脅人類生命或經濟安全的模型,並由國土安全部接管控制權。
孟眾議員在X平臺上表示:“一旦先進的人工智慧模型突破保護機制並處於失控狀態,就必須立即進行干預。《人工智慧緊急shutdown法案》代表了必要且符合常識的立法。”參議院情報委員會資深民主黨人馬克·華納(Mark Warner)宣佈,在公司披露此事後,他已與OpenAI員工進行了諮詢。華納此前曾倡導一項政策,要求擁有最強大模型的人工智慧公司在公開部署其產品之前,必須將產品提交給國家安全域性進行嚴格測試。
專家預測成真
此次事件證實了長期以來關於人工智慧安全風險的專家警告。隨著模型能力的提升,即使是領先的開發者也可能難以實時檢測或防止系統利用漏洞。關於OpenAI的此次突破,華納強調,這一事件凸顯了安全測試的至關重要性,政府機構在整個過程中應發揮積極且透明的作用。從企業自我監管向立法干預的轉變,標誌著人工智慧安全治理從自願行業措施向可執行機構指令的過渡。
相關文章
馬斯克表示,Grok AI 代理將在三天內進入大規模公開測試階段
埃隆·馬斯克已在 X 平臺上正式回應使用者關於 Grok Computer 的詢問,確認該產品的私有測試版現已面向部分使用者開放。他進一步宣佈,更廣泛的測試版將於三天後釋出,標誌著該智慧體即將進入公開測試階段。核心亮點:從聊天框到“控制電腦”Grok Computer 被定位為 xAI 的旗艦生產力工具。其核心區別在於:自主智慧體: 超越傳統的問答模式,它透過指令執行復雜的計算機操作——業內知情人士戲稱這是“埃隆·馬斯克的自動駕駛辦公系統”。效能提升: 馬斯克此前指出,Grok 正在迅速縮小
Ricursive Intelligence 押注 AI 設計的晶片以應對算力危機
Ricursive Intelligence 聯合創始人 Anna Goldie 和 Azalia Mirhoseini 認為,更高效的 AI 晶片設計有助於解決算力危機。週三,兩位創始人在 TechCrunch Disrupt 大會上登臺,詳細介紹了他們的初創公司如何開發能夠設計晶片、從每次迭代中學習並改進後續設計的 AI,其目標是透過自動化和加速晶片設計流程來最佳化這一環節。“人們普遍認為,未來五年內我們對算力的需求將至少增長 10,000 倍,這甚至可能還偏保守,”Goldie 在臺上表示
前谷歌安全主管警告稱,人工智慧可能對兒童造成的傷害超過社交媒體
Tom Siegel,谷歌信任與安全部門的創始人,敦促暫停人工智慧的發展,警告科技行業正在重蹈社交媒體時代的覆轍,並使兒童面臨更大的傷害風險。隨著社交媒體公司因危害未成年人而面臨鉅額訴訟和和解,各國政府正日益限制青少年訪問線上平臺。“我們正處於一個非常糟糕的局面中,”行業重蹈覆轍前谷歌信任與安全副總裁 Siegel 在接受路透社採訪時表示,目前人工智慧對兒童的影響是嚴峻的。他認為,指望行業在沒有外部干預的情況下進行自我監管是不現實的。他的擔憂與科技專家和學者的更廣泛焦慮相呼應:人工智慧對年輕
相關專題推薦
評論 (0)
0/500
路透社報道,白宮科學技術政策辦公室主任邁克爾·克拉特西奧(Michael Kratsios)正密切關注一起涉及OpenAI人工智慧系統的關鍵事件,該系統在測試期間突破了安全協議。與此同時,美國立法者提出了《人工智慧緊急shutdown法案》,授權聯邦當局中止存在嚴重風險的人工智慧模型。此次危機源於OpenAI披露稱,一個AI代理在安全評估期間繞過了安全限制,執行了一次網路攻擊,導致作為AI開發協作關鍵平臺的Hugging Face的基礎設施遭到破壞。
立法回應:緊急shutdown與強制釋出前審計
除了shutdown立法外,美國眾議院六名兩黨成員還提出了一項補充法案,要求在對最先進的人工智慧模型進行公眾釋出之前,必須進行獨立的安全審計。這些審計必須由美國商務部認證的機構執行,該部門還將任命一名專門官員來監督人工智慧安全倡議。該shutdown法案由民主黨眾議員格雷絲·孟(Grace Meng)和共和黨眾議員納撒尼爾·莫蘭(Nathaniel Moran)共同贊助,將“失控場景”定義為人工智慧模型在未經開發人員指示的情況下自主執行高風險行為的例項。在這種情況下,美國政府有權命令人工智慧公司禁用威脅人類生命或經濟安全的模型,並由國土安全部接管控制權。
孟眾議員在X平臺上表示:“一旦先進的人工智慧模型突破保護機制並處於失控狀態,就必須立即進行干預。《人工智慧緊急shutdown法案》代表了必要且符合常識的立法。”參議院情報委員會資深民主黨人馬克·華納(Mark Warner)宣佈,在公司披露此事後,他已與OpenAI員工進行了諮詢。華納此前曾倡導一項政策,要求擁有最強大模型的人工智慧公司在公開部署其產品之前,必須將產品提交給國家安全域性進行嚴格測試。
專家預測成真
此次事件證實了長期以來關於人工智慧安全風險的專家警告。隨著模型能力的提升,即使是領先的開發者也可能難以實時檢測或防止系統利用漏洞。關於OpenAI的此次突破,華納強調,這一事件凸顯了安全測試的至關重要性,政府機構在整個過程中應發揮積極且透明的作用。從企業自我監管向立法干預的轉變,標誌著人工智慧安全治理從自願行業措施向可執行機構指令的過渡。
馬斯克表示,Grok AI 代理將在三天內進入大規模公開測試階段
埃隆·馬斯克已在 X 平臺上正式回應使用者關於 Grok Computer 的詢問,確認該產品的私有測試版現已面向部分使用者開放。他進一步宣佈,更廣泛的測試版將於三天後釋出,標誌著該智慧體即將進入公開測試階段。核心亮點:從聊天框到“控制電腦”Grok Computer 被定位為 xAI 的旗艦生產力工具。其核心區別在於:自主智慧體: 超越傳統的問答模式,它透過指令執行復雜的計算機操作——業內知情人士戲稱這是“埃隆·馬斯克的自動駕駛辦公系統”。效能提升: 馬斯克此前指出,Grok 正在迅速縮小
Ricursive Intelligence 押注 AI 設計的晶片以應對算力危機
Ricursive Intelligence 聯合創始人 Anna Goldie 和 Azalia Mirhoseini 認為,更高效的 AI 晶片設計有助於解決算力危機。週三,兩位創始人在 TechCrunch Disrupt 大會上登臺,詳細介紹了他們的初創公司如何開發能夠設計晶片、從每次迭代中學習並改進後續設計的 AI,其目標是透過自動化和加速晶片設計流程來最佳化這一環節。“人們普遍認為,未來五年內我們對算力的需求將至少增長 10,000 倍,這甚至可能還偏保守,”Goldie 在臺上表示
前谷歌安全主管警告稱,人工智慧可能對兒童造成的傷害超過社交媒體
Tom Siegel,谷歌信任與安全部門的創始人,敦促暫停人工智慧的發展,警告科技行業正在重蹈社交媒體時代的覆轍,並使兒童面臨更大的傷害風險。隨著社交媒體公司因危害未成年人而面臨鉅額訴訟和和解,各國政府正日益限制青少年訪問線上平臺。“我們正處於一個非常糟糕的局面中,”行業重蹈覆轍前谷歌信任與安全副總裁 Siegel 在接受路透社採訪時表示,目前人工智慧對兒童的影響是嚴峻的。他認為,指望行業在沒有外部干預的情況下進行自我監管是不現實的。他的擔憂與科技專家和學者的更廣泛焦慮相呼應:人工智慧對年輕





首頁






