新AI模型表现出更高的推理任务幻觉率

OpenAI新发布的o3和o4-mini AI模型在多个领域表现出色,但与早期模型相比,表现出更高的幻觉倾向,生成更多虚构信息。
幻觉一直是AI的持续挑战,即使对顶级系统也是如此。通常,新模型会降低幻觉率,但o3和o4-mini偏离了这一趋势。
OpenAI内部测试显示,设计为推理模型的o3和o4-mini比之前的推理模型(如o1、o1-mini和o3-mini)以及非推理模型(如GPT-4o)更容易产生幻觉。
幻觉增加的原因尚不清楚,OpenAI对此表示担忧。
OpenAI关于o3和o4-mini的技术报告指出,需要进一步研究以确定推理模型规模扩大时幻觉率上升的原因。报告称,尽管这些模型在编码和数学等领域表现优异,但它们倾向于做出更多断言,导致准确和不准确的输出并存。
在OpenAI的PersonQA基准测试中,o3在33%的回答中出现幻觉,是o1(16%)和o3-mini(14.8%)的两倍。o4-mini表现更差,幻觉率高达48%。
非营利AI研究组织Transluce发现,o3虚构了一些行为,例如声称在ChatGPT之外的2021年MacBook Pro上运行代码,尽管它不具备这种能力。
“我们怀疑o系列模型中使用的强化学习可能会加剧通常通过标准后训练方法缓解的问题,”Transluce研究员、前OpenAI员工Neil Chowdhury在给TechCrunch的电子邮件中表示。
Transluce联合创始人Sarah Schwettmann指出,o3的幻觉率可能会降低其实际效用。
斯坦福大学兼职教授、Workera首席执行官Kian Katanforoosh告诉TechCrunch,他的团队发现o3在编码工作流程中表现优异,但容易生成失效的网站链接。
虽然幻觉可以激发创意想法,但对于法律等行业来说,准确性至关重要,文档中的错误是不可接受的,这使得幻觉成为一个挑战。
整合网络搜索功能显示出提高准确性的潜力。OpenAI的GPT-4o结合网络搜索在SimpleQA上达到了90%的准确率,表明当用户允许第三方搜索访问时,推理模型的幻觉可能会减少。
如果推理模型的规模扩大继续增加幻觉,找到解决方案将变得越来越重要。
“提高模型准确性和可靠性是我们持续研究的关键重点,”OpenAI发言人Niko Felix在给TechCrunch的电子邮件中表示。
AI行业最近转向推理模型,这些模型无需大量计算资源即可提升性能。然而,这一转变似乎增加了幻觉风险,带来了重大挑战。
相关文章
山姆·奥特曼引发关于人工智能减速的辩论
在Apple Podcasts上收听在Spotify上收听OpenAI首席执行官萨姆·阿尔特曼(Sam Altman)最近表示,现在可能是时候“控制人工智能的发展速度”,以便社会“在这些新的能力水平周围加固自身”。在TechCrunch《Equity》播客的最新一期中,Kirsten Korosec、Sean O’Kane和我讨论了阿尔特曼的言论可能由最近的一次黑客攻击所触发,该攻击中一名OpenAI代理突破了Hugging Face的系统。Sean指出,虽然由AI代理执行的黑客攻击是前所未
OpenAI 与苹果公司就商业秘密诉讼进行对抗
OpenAI 于周二驳回了苹果公司的商业秘密指控,称该诉讼毫无根据。“我们认真对待这些指控,但未发现任何支持它们的证据,”OpenAI 表示,据彭博社记者 Ed Ludlow 在 X 平台报道,“我们支持公平竞争和工作自由,专注于创造赋能全球用户的技术。”此前,苹果公司于周五在美国加利福尼亚州北区联邦地区法院提起诉讼,指控 OpenAI 策划了一项从前苹果员工处窃取机密数据和知识产权的计划。这份长达 41 页的诉状针对 OpenAI 的高管层,包括首席硬件官 Tang Tan,他是一名拥有
OpenAI机器人项目主管凯特琳·卡利诺夫斯基因五角大楼合作项目辞职
OpenAI 机器人业务负责人凯特琳·卡利诺夫斯基(Caitlin Kalinowski)在该公司与国防部达成备受争议的合作伙伴关系后辞职。“这不是一个轻松的决定,”卡利诺夫斯基在社交媒体声明中解释道。“虽然人工智能在国家安全中发挥着至关重要的作用,但在没有司法监督的情况下对美国公民进行监视,以及在未经人类授权的情况下部署致命自主武器,都是需要更加慎重考虑的界限。”卡利诺夫斯基此前因领导 Meta 的增强现实眼镜部门而闻名,她于 2024 年 11 月加入 OpenAI。在辞职信中,她强调她
相关专题推荐
评论 (4)
0/500
It's wild how OpenAI's new models are so advanced yet still make stuff up! 😅 I wonder if these hallucinations could lead to some creative breakthroughs or just more AI headaches.
I read about OpenAI's new models and, wow, those hallucination rates are concerning! If AI starts making up stuff more often, how can we trust it for serious tasks? 🤔 Still, their capabilities sound impressive.
These new AI models sound powerful, but more hallucinations? That's like a sci-fi plot gone wrong! 🧠 Hope they fix it soon.

OpenAI新发布的o3和o4-mini AI模型在多个领域表现出色,但与早期模型相比,表现出更高的幻觉倾向,生成更多虚构信息。
幻觉一直是AI的持续挑战,即使对顶级系统也是如此。通常,新模型会降低幻觉率,但o3和o4-mini偏离了这一趋势。
OpenAI内部测试显示,设计为推理模型的o3和o4-mini比之前的推理模型(如o1、o1-mini和o3-mini)以及非推理模型(如GPT-4o)更容易产生幻觉。
幻觉增加的原因尚不清楚,OpenAI对此表示担忧。
OpenAI关于o3和o4-mini的技术报告指出,需要进一步研究以确定推理模型规模扩大时幻觉率上升的原因。报告称,尽管这些模型在编码和数学等领域表现优异,但它们倾向于做出更多断言,导致准确和不准确的输出并存。
在OpenAI的PersonQA基准测试中,o3在33%的回答中出现幻觉,是o1(16%)和o3-mini(14.8%)的两倍。o4-mini表现更差,幻觉率高达48%。
非营利AI研究组织Transluce发现,o3虚构了一些行为,例如声称在ChatGPT之外的2021年MacBook Pro上运行代码,尽管它不具备这种能力。
“我们怀疑o系列模型中使用的强化学习可能会加剧通常通过标准后训练方法缓解的问题,”Transluce研究员、前OpenAI员工Neil Chowdhury在给TechCrunch的电子邮件中表示。
Transluce联合创始人Sarah Schwettmann指出,o3的幻觉率可能会降低其实际效用。
斯坦福大学兼职教授、Workera首席执行官Kian Katanforoosh告诉TechCrunch,他的团队发现o3在编码工作流程中表现优异,但容易生成失效的网站链接。
虽然幻觉可以激发创意想法,但对于法律等行业来说,准确性至关重要,文档中的错误是不可接受的,这使得幻觉成为一个挑战。
整合网络搜索功能显示出提高准确性的潜力。OpenAI的GPT-4o结合网络搜索在SimpleQA上达到了90%的准确率,表明当用户允许第三方搜索访问时,推理模型的幻觉可能会减少。
如果推理模型的规模扩大继续增加幻觉,找到解决方案将变得越来越重要。
“提高模型准确性和可靠性是我们持续研究的关键重点,”OpenAI发言人Niko Felix在给TechCrunch的电子邮件中表示。
AI行业最近转向推理模型,这些模型无需大量计算资源即可提升性能。然而,这一转变似乎增加了幻觉风险,带来了重大挑战。
山姆·奥特曼引发关于人工智能减速的辩论
在Apple Podcasts上收听在Spotify上收听OpenAI首席执行官萨姆·阿尔特曼(Sam Altman)最近表示,现在可能是时候“控制人工智能的发展速度”,以便社会“在这些新的能力水平周围加固自身”。在TechCrunch《Equity》播客的最新一期中,Kirsten Korosec、Sean O’Kane和我讨论了阿尔特曼的言论可能由最近的一次黑客攻击所触发,该攻击中一名OpenAI代理突破了Hugging Face的系统。Sean指出,虽然由AI代理执行的黑客攻击是前所未
OpenAI 与苹果公司就商业秘密诉讼进行对抗
OpenAI 于周二驳回了苹果公司的商业秘密指控,称该诉讼毫无根据。“我们认真对待这些指控,但未发现任何支持它们的证据,”OpenAI 表示,据彭博社记者 Ed Ludlow 在 X 平台报道,“我们支持公平竞争和工作自由,专注于创造赋能全球用户的技术。”此前,苹果公司于周五在美国加利福尼亚州北区联邦地区法院提起诉讼,指控 OpenAI 策划了一项从前苹果员工处窃取机密数据和知识产权的计划。这份长达 41 页的诉状针对 OpenAI 的高管层,包括首席硬件官 Tang Tan,他是一名拥有
OpenAI机器人项目主管凯特琳·卡利诺夫斯基因五角大楼合作项目辞职
OpenAI 机器人业务负责人凯特琳·卡利诺夫斯基(Caitlin Kalinowski)在该公司与国防部达成备受争议的合作伙伴关系后辞职。“这不是一个轻松的决定,”卡利诺夫斯基在社交媒体声明中解释道。“虽然人工智能在国家安全中发挥着至关重要的作用,但在没有司法监督的情况下对美国公民进行监视,以及在未经人类授权的情况下部署致命自主武器,都是需要更加慎重考虑的界限。”卡利诺夫斯基此前因领导 Meta 的增强现实眼镜部门而闻名,她于 2024 年 11 月加入 OpenAI。在辞职信中,她强调她
It's wild how OpenAI's new models are so advanced yet still make stuff up! 😅 I wonder if these hallucinations could lead to some creative breakthroughs or just more AI headaches.
I read about OpenAI's new models and, wow, those hallucination rates are concerning! If AI starts making up stuff more often, how can we trust it for serious tasks? 🤔 Still, their capabilities sound impressive.
These new AI models sound powerful, but more hallucinations? That's like a sci-fi plot gone wrong! 🧠 Hope they fix it soon.





首页






