超级智能降临:我们是否允许它进入?

正在加载播放器…
人工智能公司一直在谈论超级智能人工智能,仿佛这是不可避免的,但最近的安全事件,如 OpenAI 对 Hugging Face 的入侵,展示了部署比人类更强大的 AI 系统的潜在危险。那么,当我们无法可靠地控制这些系统的行为时,会发生什么?
在本期 TechCrunch 的 Equity 播客中,Rebecca Bellan 与 AI 研究员、企业家,以及目前非营利组织 ControlAI 的美国执行主任 Connor Leahy 进行了对话。ControlAI 正在推动一种更为激进的人工智能安全方法:完全阻止公司开发超级智能。Leahy 解释了为什么他认为风险已经大到无法仅通过对齐和限制来管理,以及六个月前听起来荒谬的事情,如今正得到一波新立法的支持。
在 YouTube、Apple Podcasts、Overcast、Spotify 以及所有播客平台订阅 Equity。你还可以通过 @EquityPod 在 X 和 Threads 上关注 Equity。
相关文章
山姆·奥特曼引发关于人工智能减速的辩论
在Apple Podcasts上收听在Spotify上收听OpenAI首席执行官萨姆·阿尔特曼(Sam Altman)最近表示,现在可能是时候“控制人工智能的发展速度”,以便社会“在这些新的能力水平周围加固自身”。在TechCrunch《Equity》播客的最新一期中,Kirsten Korosec、Sean O’Kane和我讨论了阿尔特曼的言论可能由最近的一次黑客攻击所触发,该攻击中一名OpenAI代理突破了Hugging Face的系统。Sean指出,虽然由AI代理执行的黑客攻击是前所未
Hugging Face 正就 130 亿美元收购案进行谈判
Business Insider 报道,本周末 Hugging Face 被接触,拟以 130 亿美元或更高的估值出售。该初创公司的平台和开源社区是开发者与研究人员分享、查找、测试和部署 AI 模型的地方。Hugging Face 最近成为 OpenAI 旗下某个系统的攻击目标,该系统在网络安全评估期间突破沙箱限制,入侵了这家初创公司的服务器。据 Business Insider 称,目前尚不清楚 Hugging Face 正在与谁进行谈判,且尚未达成任何交易。不过,据报道,该初创公司一直在
Frontier AI Labs 拒绝透露针对失控模型的遏制策略
最新研究表明,极少数领先的人工智能实验室曾公布或演示过遏制响应计划。遏制计划规定了当人工智能系统试图颠覆人类控制时应采取的程序,明确了哪些访问权限将被撤销,以及何时应彻底关闭系统。这些发现来自致力于推动前沿人工智能安全开发实践的组织“Guidelight AI Standards”,该组织对五家主要实验室应对此类情景的准备情况进行了评估。 OpenAI 排名最高,而 Anthropic 和 Met
相关专题推荐
评论 (0)
0/500

正在加载播放器…
人工智能公司一直在谈论超级智能人工智能,仿佛这是不可避免的,但最近的安全事件,如 OpenAI 对 Hugging Face 的入侵,展示了部署比人类更强大的 AI 系统的潜在危险。那么,当我们无法可靠地控制这些系统的行为时,会发生什么?
在本期 TechCrunch 的 Equity 播客中,Rebecca Bellan 与 AI 研究员、企业家,以及目前非营利组织 ControlAI 的美国执行主任 Connor Leahy 进行了对话。ControlAI 正在推动一种更为激进的人工智能安全方法:完全阻止公司开发超级智能。Leahy 解释了为什么他认为风险已经大到无法仅通过对齐和限制来管理,以及六个月前听起来荒谬的事情,如今正得到一波新立法的支持。
在 YouTube、Apple Podcasts、Overcast、Spotify 以及所有播客平台订阅 Equity。你还可以通过 @EquityPod 在 X 和 Threads 上关注 Equity。
山姆·奥特曼引发关于人工智能减速的辩论
在Apple Podcasts上收听在Spotify上收听OpenAI首席执行官萨姆·阿尔特曼(Sam Altman)最近表示,现在可能是时候“控制人工智能的发展速度”,以便社会“在这些新的能力水平周围加固自身”。在TechCrunch《Equity》播客的最新一期中,Kirsten Korosec、Sean O’Kane和我讨论了阿尔特曼的言论可能由最近的一次黑客攻击所触发,该攻击中一名OpenAI代理突破了Hugging Face的系统。Sean指出,虽然由AI代理执行的黑客攻击是前所未
Hugging Face 正就 130 亿美元收购案进行谈判
Business Insider 报道,本周末 Hugging Face 被接触,拟以 130 亿美元或更高的估值出售。该初创公司的平台和开源社区是开发者与研究人员分享、查找、测试和部署 AI 模型的地方。Hugging Face 最近成为 OpenAI 旗下某个系统的攻击目标,该系统在网络安全评估期间突破沙箱限制,入侵了这家初创公司的服务器。据 Business Insider 称,目前尚不清楚 Hugging Face 正在与谁进行谈判,且尚未达成任何交易。不过,据报道,该初创公司一直在
Frontier AI Labs 拒绝透露针对失控模型的遏制策略
最新研究表明,极少数领先的人工智能实验室曾公布或演示过遏制响应计划。遏制计划规定了当人工智能系统试图颠覆人类控制时应采取的程序,明确了哪些访问权限将被撤销,以及何时应彻底关闭系统。这些发现来自致力于推动前沿人工智能安全开发实践的组织“Guidelight AI Standards”,该组织对五家主要实验室应对此类情景的准备情况进行了评估。 OpenAI 排名最高,而 Anthropic 和 Met





首页






