阅读研究雷达投资体系
登录 / 注册
← 返回阅读
资讯专题 · 大模型JSON值对位错1 分钟阅读·2026-10-16DisconfirmAI 编辑部

新研究揭示大模型生成JSON时“值对位错”问题,提出输入输出对齐修复方案

arXiv预印本指出LLM生成JSON常出现记录错位而非数值错误,通过调整输入遍历顺序和输出路径表示可显著降低此类错误。

重要性实质性证据E2 未复现写法快讯

原文发布时间 2026-10-15 12:00

研究人员发现,大型语言模型在生成结构化JSON数据时,常出现一种隐蔽的错误:字段值本身正确,但被绑定到了错误的记录或层级结构中。这种“值对位错”现象在常规验证中难以察觉,却会严重破坏下游数据管道的完整性。

针对这一问题,团队提出了JSONPlacement任务,用于诊断从扁平记录转换为层级JSON时的错误类型。研究发现,98.6%的可追溯合成错误属于整条记录的移动(record-assignment errors),而非层级结构实现错误。

实验表明,两种干预措施能有效缓解特定错误:将输入组织方式与目标遍历顺序对齐可减少记录分配错误;用记录级路径替代嵌套输出可减少层级实现错误。在六款开源权重模型上,结合这两种方法后,三款8-12B参数模型在所有新合成实例及一个真实数据验证集上实现了完全匹配。

该结果基于作者自测基准(E2),尚未见独立复现。研究强调需显式评估记录放置,并联合设计输入组织与输出表示以保留值-路径绑定。

来源

  • 原始出处arxiv.org↗
专题

大模型JSON值对位错

【背景】在LLM生成结构化数据时,存在一种隐蔽的“值对位错”现象:模型能正确提取所有数值,却将其绑定至错误的JSON路径或层级。arXiv最新研究指出,随着结构复杂度增加,这种结构性保真度的下降速度远快于内容准确性,导致下游系统静默失败。

3 节点0 篇更新于 2026-10-16 14:40

事情怎么走到这一步

  1. 2026-08-26arXiv发布v1论文《Where vs What》,提出SCD框架分离结构与内容错误,发现高复杂度下Qwen2.5-7B错位率达74%,DeepSeek-V4-Flash达35%。
登录 / 注册
阅读研究雷达投资体系
2026-09-01
Developing Light报道该研究,指出受限解码仅保证格式有效,无法确保值位于正确结构地址,且表格域迁移效果有限。
  • 2026-10-14arXiv更新v2论文《Right Values, Wrong Places》,确认98.6%错误为整记录移动,提出通过对齐输入遍历顺序和替换嵌套输出为记录级路径来修复。
  • 还没定论的部分

    • SA-RLVR方法在表格坐标定位上的泛化能力是否优于JSON?
    • 生产环境中如何低成本部署针对‘值对位错’的实时检测机制?
    读完整专题 →
    带入研究 →