大语言模型在回答问题时偶尔会一本正经地胡说八道,过去开发者总认为是模型知识不足,于是拼命加大参数、扩充数据、搭建检索库。然而,谷歌研究院与以色列理工学院联合发布的一项研究却颠覆了这一认知:模型其实“什么都懂”,只是关键时刻“想不起来”。这一发现正在成为AI领域最值得关注的科技趋势之一,它意味着通过更聪明的推理方式,而非更庞大的模型,就能大幅提升AI的实用性,也让AI独角兽和AI投资重新思考“堆算力”是不是唯一出路。
幻觉的根源:知识不在“存储”而在“提取”
传统观念里,模型答错问题等于“没学会”。工程团队看到错答,第一反应就是“知识缺失”,于是启动三板斧:加大模型规模、扩充训练语料、或者外挂知识库。这些方案听起来合理,却常常事倍功半,甚至完全无效。
谷歌和Technion的研究团队用大量实验证明:大部分被“幻觉”掉的知识并没有丢失,而是以参数形式牢牢编码在模型内部,只不过在生成回答时没有被成功调用。打个比方,这些知识就像放在图书馆里的书,书明明在架子上,但你在检索时没找到。研究人员在GPT-5、Gemini-3这类前沿模型上测试发现,它们对测试事实的编码率高达95%到98%,然而直接回答的准确率却明显偏低。
这意味着“回忆障碍”才是事实准确性的主要瓶颈,而不是“编码缺失”。对于开发者来说,这是一个至关重要的认知升级。如果知识已经存在,那么通过推理阶段的计算来“唤醒”它,会比重新训练一个大模型更经济,也更高效。这一认知正在催生新的工具链和优化策略,也是当前科技趋势中备受关注的焦点。
值得注意的是,这一结论对AI投资逻辑也有深远影响。过去资本追逐“更大参数、更多数据”的故事,而“如何让已有知识被激活”则指向了推理优化、模型压缩、算法创新等新赛道。不少AI独角兽开始调整研发重心,从堆GPU转向琢磨“思维链”,用更少的资源撬动更高的准确率。
事实编码与回忆:从“问一句对一题”到“画出知识图谱”
为了精确区分“知识是否存在”和“知识能否被提取”,研究者提出了一种全新的评估框架:事实级画像。传统评估只关心模型是否答对某个孤立问题,而这种新方法会对一个底层事实进行多角度、多方式的测试,考察它是否真的被编码在参数里、能否从不同方向和措辞中查询到,以及需要多少计算代价才能被提取。
这个框架明确了两个关键概念:编码和知道。如果模型在原训练上下文的提示下能准确复现某个事实,说明该事实被“编码”了;如果模型能在各种不同问法下都稳定回答,才算“知道”。研究者指出:“在被准确率指标评估时,编码失败和回忆失败看起来一模一样,但两者对应的解决方案完全不同。”编码失败需要通过预训练干预,比如增加模型规模或数据覆盖;回忆失败则应采用训练后干预,也就是改进模型如何调用已有的参数知识。
这种“知识图谱式”的评估方式,为开发者提供了一张更精细的“病历单”。以前一个模型答错,你知道它废了,但不知道哪里废;现在你能看出是“脑子里没货”还是“嘴皮子不利索”,从而对症下药。这种思路已经渗透到AI产品设计中,很多团队在部署AI工具导航上的各类模型时,会先做一次事实级诊断,再决定用微调还是加推理逻辑。
对普通用户来说,这也解释了为什么有时你问AI一个问题,它先答错,你再追问一句“你确定吗”,它又改对了——这并非它“蒙”对了,而是额外的推理计算激活了原本因检索路径不佳而被锁死的记忆存储。
五种知识画像:从“空空如也”到“灵光一现”
为了更直观地描述模型的知识状态,研究团队以“绿洲乐队首秀在哪举办”为例,归纳出五种典型的知识画像。
第一种是直接回忆:模型编码了事实,不需额外算力就能顺利答出。这是最理想的状态。第二种是编码失败(空书架):模型完全没学过这个事实,既无法补全百科式句子,也答不出任何相关问题——这是真正的“知识黑洞”,只能通过增加预训练数据或扩大容量来解决。
第三种是回忆失败(丢钥匙):模型内部有这条事实,却无法主动访问。它能无缝补全关于绿洲乐队的原始训练文本,可你问它“绿洲第一场演出在哪”,它就算多思考一会儿也答不上来。这就好比钥匙锁在家里,你却站在门外干着急。
第四种是思考型回忆:事实已编码,但无法直接生成,只有在模型动用推理计算,比如生成思维链时,才能“绕道”想起。研究者称之为“回忆促进”。模型可能一开始答不出,但通过思考乐队在曼彻斯特的早期历史,逐步锁定答案。
第五种是无编码推理:模型其实从没学过绿洲这个具体事实,但它根据已有知识进行合理推断,比如知道绿洲成立于曼彻斯特、知道Boardwalk是当地很有名的90年代音乐俱乐部,于是拼凑出正确答案。这种能力说明模型并不只是“记忆机器”,还具备举一反三的关联推理潜力。
这五种画像层层递进,让开发者可以精确定位错误类型。如果你的应用老是出现“丢钥匙”式错误,那就别急着换大模型,先调整提示词策略或叠加推理步骤。更妙的是,这种思路还能与文生图等生成式应用结合——模型不是在“画图”而是在“回忆”视觉概念时有卡顿,用类似方式就能改善输出质量。
推理时间计算:解锁“舌尖现象”的关键钥匙
研究人员在WikiProfile基准上对13个大语言模型进行了超400万次响应测试,每个事实都经历从精确上下文补全到多项选择验证等多种格式。结果显示,像GPT-5和Gemini-3这样的前沿模型,编码率已达95%-98%——但如果不加“思考”,它们仍有26%-34%的已编码事实无法直接回忆。
这是一个惊人的数字:约三分之一的知识被“封存”在模型内部。然而,如果给模型更多推理计算时间,比如允许它生成中间推理步骤,它能成功找回40%-65%原本“想不起来”的事实。这就像人类经历“舌尖状态”时,只要多努力回忆一下,往往就能想起来。研究者认为,这种机制完全可以类比:语言模型也需要“在脑子里过一遍”的试错过程。
这里的关键在于“推理时间计算”并非简单的“多跑几步”,而是通过结构化的思维链、自一致性检查等手段,让模型自主构建知识提取路径。研究者将其称为“回忆促进”——模型通过生成与目标相关的中间思考,在参数空间中建立起从“已知”到“待回忆”的桥梁。
这项技术已经在多个应用场景中落地。比如,一些写作助手在生成历史相关内容时,会先让模型回顾时间线,再落笔输出,准确率显著提升。同样,在抠图等图像处理工具中,模型也开始加入“先理解前景物体轮廓,再分离背景”的推理步骤,本质上就是在做视觉版的“回忆促进”。这些细节,都是科技趋势从“拼命堆数据”转向“巧妙用算力”的真实写照。
规模越大越容易“卡壳”?模型扩展的悖论
一个反直觉的现象令研究者印象深刻:单纯扩大模型规模,并不能自动解决“回忆失败”的问题。相反,公司常常犯下昂贵且低效的错误——为了纠正回忆失败,他们选择微调更大的内部模型,结果钱花了、知识还是“卡壳”。
谷歌研究科学家Nitay Calderon强调:“当事实出错时,通常的做法是扩大规模,训练更大的模型或添加更多数据。这两样都很贵,而且如果事实已经编码,这样做毫无帮助。”
实验提供了硬核证据:把Gemma3模型从10亿参数扩展到270亿参数,编码失败的“空书架”确实被大幅填充,从85%降低到23%。但与此同时,回忆失败的比例却一路走高,在没有思考的情况下峰值达到40%。也就是说,模型记住的事实越多,反而有越多的知识陷入“编码但不可访问”的尴尬处境。规模扩展解决的是存储问题,而不是访问问题——就像仓库越建越大,但叉车司机依然找不到货架上的特定箱子。
这个发现对AI产业有深刻启示。当前许多大模型团队把“多模态、超长上下文”当作卖点,却忽视了对已有知识的利用率。其实,在推理阶段加上一条“自查链”,可能比多训5000亿token更有效。
这种效率优先的思路,也正成为AI独角兽们差异化竞争的法宝。聪明的团队不再一味比拼参数规模,而是开发“小模型+强推理”的组合拳,既降低推理成本,又保证专业场景下的可靠性。AI投资的逻辑随之改变——资本开始关注那些能提升模型“回忆能力”的创业公司,比如做提示词优化、推理调度、记忆管理的新锐团队。可以说,这场从“存储竞赛”转向“提取竞赛”的变革,已经是当前最值得押注的科技趋势之一。
对AI开发者的启示:从盲目扩模到智能唤醒
这项研究给工程团队带来的最大启示是:遇到模型答错,先别急着“换脑子”,先给自己的模型做一次“知识体检”。
具体来说,开发者可以采用事实级画像来诊断错误。如果问题属于编码失败,那就去补数据、加参数;如果属于回忆失败,那就该把精力投入到推理优化上,比如采用链式思考(CoT)、思维草稿、自适应计算时间等策略。好的推理设计可以让模型在生成时“停下来想一想”,而不是一股脑输出。
一个直接的落地方案是:为关键业务应用搭建“回忆增强”管线。当模型首次输出低置信度答案时,触发一个额外的推理循环,让模型自己质疑并修正回答。这远比在外部挂一个数据库更轻量,也远比重新训练一个模型更便宜。已经有团队将这种策略整合进AI工具箱,做到开箱即用,让中小企业也能享受“推理红利”。
值得注意的是,推理时间计算并非万能钥匙。对于真正缺乏编码事实的长尾知识,它依然无能为力。研究者指出,未来可能需要混合架构:基础模型负责存储和直接输出,推理模块负责在遇到“舌尖状态”时启动搜索,同时辅以外部知识源作为兜底。这种“即插即用”的思维,也是众多AI独角兽正在构建的核心壁垒。
从资本视角看,AI投资正从“看参数”转向“看算法效率”。一个能解决回忆失败的轻量方案,其商业价值可能不亚于一个千亿参数的大模型。而作为AI工具的受益者,无论你是开发聊天机器人,还是利用AI画图创作视觉内容,理解“知识唤醒”的机制,都能帮你避开无效堆参数的陷阱,用更小的成本获得更聪明的AI。
归根结底,AI能力的上限不止取决于“知道多少”,更取决于“能在关键时刻想起多少”。这场从存储到提取的认知转向,正在成为未来几年AI发展的真正分水岭。
FAQ
Q1:什么是推理时间计算? 推理时间计算是指在模型生成答案时,允许它额外进行多步思考、自我校验或生成中间推理过程,而不是一次性直接输出结果。它可以在不修改模型参数的情况下,提升模型对已编码知识的回忆成功率。
Q2:模型规模扩大和推理时间计算有什么区别? 扩大模型规模属于预训练阶段的干预,目标是增加知识存储量;推理时间计算属于训练后阶段的干预,目标是提高已有知识的提取效率。实验表明,扩大规模可能增加“回忆失败”的概率,而推理时间计算能直接激活隐藏知识,性价比更高。
Q3:这项研究对AI开发和投资有什么实际影响? 对开发者而言,它提供了诊断模型错误的新方法,避免盲目耗费算力扩大模型。对投资而言,它引导资本流向“推理优化”、“记忆管理”等新赛道,使AI独角兽们有机会用更小的模型实现更强性能,从而改变AI投资的评估标准。