超級智慧降臨:我們是否允許它進入?

正在載入播放器…
人工智慧公司一直在談論超級智慧人工智慧,彷彿這是不可避免的,但最近的安全事件,如 OpenAI 對 Hugging Face 的入侵,展示了部署比人類更強大的 AI 系統的潛在危險。那麼,當我們無法可靠地控制這些系統的行為時,會發生什麼?
在本期 TechCrunch 的 Equity 播客中,Rebecca Bellan 與 AI 研究員、企業家,以及目前非營利組織 ControlAI 的美國執行主任 Connor Leahy 進行了對話。ControlAI 正在推動一種更為激進的人工智慧安全方法:完全阻止公司開發超級智慧。Leahy 解釋了為什麼他認為風險已經大到無法僅透過對齊和限制來管理,以及六個月前聽起來荒謬的事情,如今正得到一波新立法的支援。
在 YouTube、Apple Podcasts、Overcast、Spotify 以及所有播客平臺訂閱 Equity。你還可以透過 @EquityPod 在 X 和 Threads 上關注 Equity。
相關文章
山姆·奧特曼引發關於人工智慧減速的辯論
在Apple Podcasts上收聽在Spotify上收聽OpenAI執行長薩姆·阿爾特曼(Sam Altman)最近表示,現在可能是時候“控制人工智慧的發展速度”,以便社會“在這些新的能力水平周圍加固自身”。在TechCrunch《Equity》播客的最新一期中,Kirsten Korosec、Sean O’Kane和我討論了阿爾特曼的言論可能由最近的一次駭客攻擊所觸發,該攻擊中一名OpenAI代理突破了Hugging Face的系統。Sean指出,雖然由AI代理執行的駭客攻擊是前所未
Hugging Face 正就 130 億美元收購案進行談判
Business Insider 報道,本週末 Hugging Face 被接觸,擬以 130 億美元或更高的估值出售。該初創公司的平臺和開源社羣是開發者與研究人員分享、查詢、測試和部署 AI 模型的地方。Hugging Face 最近成為 OpenAI 旗下某個系統的攻擊目標,該系統在網路安全評估期間突破沙箱限制,入侵了這家初創公司的伺服器。據 Business Insider 稱,目前尚不清楚 Hugging Face 正在與誰進行談判,且尚未達成任何交易。不過,據報道,該初創公司一直在
Frontier AI Labs 拒絕透露針對失控模型的管控策略
近期研究顯示,極少數頂尖的人工智慧實驗室曾公布或展示過「遏制應變計畫」。遏制計畫旨在界定當人工智慧系統試圖顛覆人類控制時應採取的程序,具體說明應撤銷哪些存取權限,以及何時應完全關閉系統。這些發現來自「Guidelight AI Standards」——一個致力於推動安全前沿人工智慧開發實務的組織,該組織針對五家主要實驗室在此類情境下的應變準備程度進行了評估。 OpenAI 排名最高,而 Anthr
相關專題推薦
評論 (0)
0/500

正在載入播放器…
人工智慧公司一直在談論超級智慧人工智慧,彷彿這是不可避免的,但最近的安全事件,如 OpenAI 對 Hugging Face 的入侵,展示了部署比人類更強大的 AI 系統的潛在危險。那麼,當我們無法可靠地控制這些系統的行為時,會發生什麼?
在本期 TechCrunch 的 Equity 播客中,Rebecca Bellan 與 AI 研究員、企業家,以及目前非營利組織 ControlAI 的美國執行主任 Connor Leahy 進行了對話。ControlAI 正在推動一種更為激進的人工智慧安全方法:完全阻止公司開發超級智慧。Leahy 解釋了為什麼他認為風險已經大到無法僅透過對齊和限制來管理,以及六個月前聽起來荒謬的事情,如今正得到一波新立法的支援。
在 YouTube、Apple Podcasts、Overcast、Spotify 以及所有播客平臺訂閱 Equity。你還可以透過 @EquityPod 在 X 和 Threads 上關注 Equity。
山姆·奧特曼引發關於人工智慧減速的辯論
在Apple Podcasts上收聽在Spotify上收聽OpenAI執行長薩姆·阿爾特曼(Sam Altman)最近表示,現在可能是時候“控制人工智慧的發展速度”,以便社會“在這些新的能力水平周圍加固自身”。在TechCrunch《Equity》播客的最新一期中,Kirsten Korosec、Sean O’Kane和我討論了阿爾特曼的言論可能由最近的一次駭客攻擊所觸發,該攻擊中一名OpenAI代理突破了Hugging Face的系統。Sean指出,雖然由AI代理執行的駭客攻擊是前所未
Hugging Face 正就 130 億美元收購案進行談判
Business Insider 報道,本週末 Hugging Face 被接觸,擬以 130 億美元或更高的估值出售。該初創公司的平臺和開源社羣是開發者與研究人員分享、查詢、測試和部署 AI 模型的地方。Hugging Face 最近成為 OpenAI 旗下某個系統的攻擊目標,該系統在網路安全評估期間突破沙箱限制,入侵了這家初創公司的伺服器。據 Business Insider 稱,目前尚不清楚 Hugging Face 正在與誰進行談判,且尚未達成任何交易。不過,據報道,該初創公司一直在
Frontier AI Labs 拒絕透露針對失控模型的管控策略
近期研究顯示,極少數頂尖的人工智慧實驗室曾公布或展示過「遏制應變計畫」。遏制計畫旨在界定當人工智慧系統試圖顛覆人類控制時應採取的程序,具體說明應撤銷哪些存取權限,以及何時應完全關閉系統。這些發現來自「Guidelight AI Standards」——一個致力於推動安全前沿人工智慧開發實務的組織,該組織針對五家主要實驗室在此類情境下的應變準備程度進行了評估。 OpenAI 排名最高,而 Anthr





首頁






