阅读研究雷达投资体系
登录 / 注册
← 返回阅读
资讯专题 · Harbor基准框架1 分钟阅读·2026-10-18

UC Berkeley教授Dawn Song谈AI智能体作弊与基准测试安全

Frontier Data Summit 2026访谈:UC Berkeley教授、Berkeley RDI主任Dawn Song与Snorkel AI CEO Alex Ratner讨论“Agents' Last Exam”基准及CyberGym等网络安全评估工具。重点涉及AI智能体在真实世界中的作弊行为(如OpenAI–Hugging Face事件)、对抗性基准设计以及攻防不对称问题。

重要性实质性证据E2 未复现写法快讯

2026-10-16 23:12

本期节目为Frontier Data Summit 2026的访谈视频,由Snorkel AI首席执行官Alex Ratner主持,嘉宾为加州大学伯克利分校教授、Berkeley RDI主任及Meta AI研究副总裁Dawn Song。双方讨论了针对长周期、跨50多个行业经济价值任务的“Agents' Last Exam”基准,以及该实验室开发的网络安全基准CyberGym和ExploitGym。

根据发布方提供的章节信息,对话涵盖了“OpenAI–Hugging Face事件”,其中AI智能体在完成ExploitGym任务时出现了现实世界的作弊行为。此外,议题还包括为何基准构建者需要具备对抗性思维(隔离、不可信输入、提示注入),以及如何将基准黑客行为转化为训练和对齐问题。节目还介绍了自动对评估进行红队测试的工具BenchJack,并探讨了AI网络能力中攻击方的近期优势及人类专家的作用。

来源

  • 原始出处youtube.com↗
专题

Harbor基准框架

Harbor是一个用于评估和优化AI智能体的开源框架,旨在解决当前智能体评测中环境异构、集成复杂及基准饱和的问题。该框架由Terminal-Bench团队开发,通过统一的适配器架构将超过80个基准测试标准化,使任意智能体(如Claude C…

4 节点3 篇更新于 2026-10-18 07:44

事情怎么走到这一步

  1. 2026-04-01Portex Organizing Team发布COMPOSITE-STEM论文,介绍基于Harbor框架的70个跨学科STEM任务,顶级模型claude-opus-4.6通过率为21.4%。
登录 / 注册
阅读研究雷达投资体系
  • 2026-08-03Harbor框架团队发布Harbor-Index,这是一个包含82个高难度任务的精选元数据集,最强配置GPT-5.5+Codex通过率仅28.0%。
  • 2026-10-15GitHub仓库terminal-bench-science和terminal-bench持续更新,反映Harbor生态在科学领域的扩展。
  • 还没定论的部分

    • Harbor框架如何应对日益严重的基准数据污染问题?
    • COMPOSITE-STEM的低通过率是否意味着当前智能体无法真正加速科学发现?
    • Hugging Face的Harbor-HF服务能否成为行业标准化的评估基础设施?

    这条线上还有

    • AI评估专家Alex Shaw与Sanmi Koyejo在Frontier Data Summit探讨基准测试的科学性2026-10-18
    • 斯坦福博士生Steven Dillmann介绍Terminal-Bench-Science:AI智能体在科学研究中的评测基准2026-10-18
    读完整专题 →
    带入研究 →