阅读研究雷达投资体系
登录 / 注册
← 返回阅读
资讯专题 · CoEM延迟压缩记忆1 分钟阅读·2026-10-02

延迟压缩记忆法CoEM,长文推理F1自测提升逾10分

CoEM把压缩决定推迟到后续上下文确认证据相关性之后,作者自测在Qwen3.5-9B上比最强记忆基线高10.4至11.4个F1点,效果待独立复现。

重要性局部证据E2 未复现写法快讯

2026-09-30 12:00

读者现在可以了解CoEM这种长上下文记忆管理方法:先原样暂存可能有用的原文片段,等后续内容确认其相关性,再决定写入压缩记忆或丢弃,避免过早压缩丢掉关键细节,作者自测F1提升10分以上。

以往的做法是尽早压缩记忆,可能在证据相关性尚未明朗时就丢弃关键细节,造成长文推理信息损失。

作者用强化学习训练这套决定策略,并加一个冻结校验器,只接受有原文支撑的记忆事实。在6400份文档的长输入上,作者自测其在Qwen3.5-9B上比最强记忆基线高10.4至11.4个F1点。

实验只覆盖Qwen3.5-9B一个模型和6400文档这一种输入长度,其他模型和更短或更长的上下文表现未知,效果尚无独立复现;代码已在GitHub开源,可据此验证。

来源

  • 原始出处arxiv.org↗
专题

CoEM延迟压缩记忆

CoEM(Commit-on-Evidence Memory)是 KAIST、澳门大学、MIT 等机构作者提出的一种长文本推理记忆框架,核心是把"压缩"这个不可逆决定推迟:模型分块读长文档时,暂不确定是否有用的原文片段先逐字存入待定区,等后…

4 节点1 篇更新于 2026-10-03 20:48

事情怎么走到这一步

  1. 2026-09-29论文 v1 提交 arXiv(cs.AI),提出 CoEM:在固定 1,024 token 记忆预算(256 待定 + 768 已提交)下延迟压缩证据,用强化学习结合最终答案奖励与步级证据奖励训练记忆策略。
  2. 2026-09-30论文更新至 v2。
登录 / 注册
阅读研究雷达投资体系
2026-09-30
GitHub 仓库上线项目概览与文档,宣布完整源码将在论文接收后发布于 GitHub、模型权重发布于 Hugging Face;仓库当前仅含文档与图表。

还没定论的部分

  • 10.4–11.4 F1 的提升能否被独立团队复现,尤其是在其他骨干模型上?
  • 论文能否通过同行评审并被会议接收,从而触发完整源码与权重的发布?
  • 延迟保留待定证据在真实生产场景(而非三个多跳 QA 基准)中的计算开销与收益如何?
读完整专题 →
带入研究 →