预印本称：独立回答调用比延续思维链更能让AI遵循最新证据

一项发布于arXiv的预印本研究《When Reasoning Traces Conflict with Evidence: How Answer Configuration Shapes Evidence Following》探讨了大语言模型在处理“内部推理轨迹”与“外部最新证据”冲突时的行为机制。研究由Shaoang Li、Yanhang Shi和Jian Li完成。

研究人员发现，保留在回答阶段的推理轨迹扮演了两个角色：它既能提高准确率，也能在与当前证据不一致时与之竞争。通过对比三种模型家族（gpt-oss、Gemma4、Qwen3）在HotpotQA和MuSiQue数据集上的表现，研究指出，使用独立的回答调用（separate answer call）而非延续模型自身的思维过程（continuation），能将“证据遵循度”提高29.9到60.6个百分点。

尽管移除推理轨迹会在两种配置下都降低准确率，但数据显示，延续思维链的方式在大多数冲突情况下会重复过时的结论，而独立回答调用则更频繁地遵循当前证据。这表明，“受益于推理轨迹”和“盲从推理轨迹”是两个独立的属性。

该研究建议，由于仅删除轨迹无法揭示答案究竟遵循了哪个来源，未来的评估应同时报告这两个属性以及具体的回答配置方式。这一发现为优化检索增强生成（RAG）系统中的智能体决策逻辑提供了重要参考。