跳到正文
LessWrong· Simon Mendelsohn·· 11 天前AI 评分47

Gemini 4 Argon 安全报告的 ML R&D 基准约四分之一任务存在 bug

"About a quarter of them contained bugs": Gemini 4's ML R&D benchmark

AI 导读

Google DeepMind 的 Gemini 4 Argon 安全报告第 67 页承认,用于检验"AI 自动化 AI 研究"(ML R&D automation)阈值的基准中,约四分之一的评分任务无法通过,导致该阈值被判定为未触发。报告部分评估使用的是最终模型发布前仅 10 天和 6 天的检查点(p.160)。Neel Nanda 称该报告是 Google 迄今最详尽的安全报告。

这篇内容暂未取得可阅读的正文,目前提供中文导读和原文入口。节目介绍或原站公开片段不代表完整文章。

来源:LessWrong · lesswrong.com

原文链接:https://www.lesswrong.com/posts/7jmfDBu2GLCfdwSte/about-a-quarter-of-them-contained-bugs-gemini-4-s-ml-r-and-d