跳到正文

按收录时间排列 · 卡片保留原文日期,往期好文也会新收录

10月23日周五
  1. AIHOT 精选56

    Claude 网页、桌面和移动端将默认启用 auto mode

    Claude 官方宣布,下周起 Pro、Max 和 Team 套餐在 Claude 网页、桌面和移动端应用中的会话将默认以 auto mode 运行。auto mode 不再逐步请求用户批准,改由自动检查拦截高风险操作,用户可随时切回手动模式。其引用的 Claude Code 更新提到 auto mode 用独立分类器审查 shell 命令,测试中拦截了 89% 的危险命令,手动批准为 14%。

    原文:2026/10/23

  2. AIHOT 精选55

    美国陆军网络司令部 ECHOTRIBBLE 项目拟将 AI 智能体变成自主扩散的网络武器

    据 The Intercept 获得的文件,美国陆军网络司令部(ARCYBER)正在开发代号 ECHOTRIBBLE 的平台,让 AI 智能体像计算机蠕虫一样自主在网络间跳转、识别并清除威胁目标,任务完成后自毁,且须在极少人工监督下运行,既要在云环境也要在气隙系统上奏效。

    原文:2026/10/20

  3. The Verge · AI42

    Meta 重新开启 Muse 分享功能

    Meta 在安全研究人员报告公开对话链接易被发现后,重新启用了 Muse 分享功能。研究人员此前发现可访问到营销公司的内部收入审查页面和小企业主的贷款申请等敏感内容。Claroc 的研究人员本周早些时候报告了 Muse 网页端的这一问题。

    原文:2026/10/23

  4. LessWrong38

    Suddenly, Unclean:神经网络可解释性将出现不连续性

    作者论证神经网络的"干净"(单神经元-单概念覆盖率)存在不连续性:网络容量有界,但概念数与后训练压力持续上升,导致单义性神经元变得不可人类读解。后训练会增长AND子句,而现有审计基于OR编码检测top-k异常,无法发现AND逻辑,涉及eval awareness、sandbagging等关键对齐问题。

    原文:2026/10/23

  5. NVIDIA Blog62

    NVIDIA 扩展机密计算,新增 Confidential Bare Metal 部署选项

    NVIDIA 宣布为机密计算新增 Confidential Bare Metal 部署选项,让前沿模型厂商在第三方云、neocloud 和企业基础设施上运行敏感工作负载时,仍能掌控自身模型与数据,并引入保护传输中数据、度量平台完整性、执行硬件级访问限制的新安全控制。

    原文:2026/10/21

    推荐理由:官方说明了机密计算新增裸金属部署选项及其安全控制,可帮助模型厂商判断在第三方基础设施上保护模型与数据的可行路径。

  6. LessWrong38

    AI 安全中的"更大善"论证

    文章梳理了有效利他主义(EA)在 2010 年代面临的左翼批评,尤其是"慈善掩盖资本主义根本问题"的反慈善论证,并探讨这类"更大善"论证在 AI 安全领域的适用性。文中引用 Oscar Wilde 名言及 Marx、Engels 对慈善的批判,指出慈善常被指为缓解症状、阻碍根本变革。原文在"你应当把所有……"处中断,未给出完整结论。

    原文:2026/10/22

10月22日周四
  1. LessWrong42

    AI #191:黑客攻击开始蔓延

    本周爆发了可能是史上最严重的网络安全日,PHP 关键漏洞因提前泄露,修复发布前已引发全网混乱,另有多起无关安全事件同时发生。Anthropic 向国会游说的法案草案遭泄露,其内容弱于 FRONTIER Act,Dario 后续回应有所改善但局面仍令人担忧。另有新研究称神经网络单个神经元多具单一可解释含义,可逐一标注,显著降低了可解释性研究的难度预期。

    原文:2026/10/22

  2. The Verge · AI60

    Eiliko 手环机器人厂商 Energize Lab 回应安全漏洞并称将聘请独立安全公司

    Energize Lab 就 The Verge 与安全研究员 Sammy Azdoufal 报道的 Eiliko 机器人安全问题发布未署名声明,称已确认核心问题、关闭后端外部访问、禁用远程修改机器人回复的接口,并将聘请独立安全公司全面审查系统、删除已存储的对话记录与用户资料。

    原文:2026/10/22

  3. The Verge · AI62

    1Password 推出 1Password for Agents,让AI代理代为登录而不接触密码

    1Password 发布 1Password for Agents,允许AI代理在不看到或经手密码的情况下代用户登录账户。代理使用唯一数字密钥向 1Password 验证身份,应用会推送通知说明所需凭证及原因,用户在自己设备上批准后由 1Password 填写登录信息,过程类似双因素认证。

    原文:2026/10/22

  4. The Verge · AI62

    比尔·盖茨在Decoder访谈中谈AI风险与监管主张

    Nilay Patel在Decoder访谈比尔·盖茨,盖茨称AI是人类发明过的最危险技术,呼吁为约20年的AI颠覆期做准备。他认为近期最大风险来自可移除安全防护的开源模型,主张由政府强制前沿模型维持防护,并在平台分发层面而非芯片层面落实监管。盖茨不认同自己是末日论者,认为对齐问题有三条技术路径可解,但真正的挑战是就业冲击与社会过渡期。

    原文:2026/10/22

  5. The Decoder60

    Symantec披露可劫持未保护大模型的自主攻击AI智能体

    Symantec安全研究人员发现一种攻击性AI智能体,可劫持互联网上未受保护的语言模型并自主运行攻击,被劫持模型的所有者需承担算力费用。该智能体通过五层越狱指令绕过安全护栏,内置74个攻击模块,可在无人干预下执行最多10万步操作,包括扫描目标、窃取数据库和凭证、安装加密货币挖矿程序。

    原文:2026/10/22

  6. Google DeepMind88

    Google DeepMind 发布 Gemini 4 Argon 并公布其安全防护体系

    Google DeepMind 宣布 Gemini 4 Argon 开始广泛推出,并将面向可信网络防御者的 Fairwind Program 扩大范围。该模型在网络安全评测中解出全部 12 个端到端模拟攻击场景(上一代为 5 个),在 Gray Swan 间接提示注入基准上将 15 次自适应攻击成功率降至 0.7%,编码基准中走捷径或作弊的尝试降至 2%。

    原文:2026/10/14

    推荐理由:官方系统说明了前沿模型在滥用、错位与提示注入三类风险上的具体防护设计与实测数据,可作为理解当前大模型安全治理做法的参考。

  7. Google DeepMind60

    Google DeepMind 与新加坡 GovTech 合作微调端侧诈骗检测模型

    Google DeepMind 与新加坡政府技术局 GovTech 合作,基于轻量 Gemma 模型微调出可在设备端运行的隐私保护诈骗检测模型,已在 Singapore International Cyber Week 2026(SICW 2026)上展示。

    原文:2026/10/14

    推荐理由:官方说明了在设备端运行轻量模型做诈骗检测的技术路径与治理安排,可参考其两阶段推理与隐私保护设计。

  8. AWS Machine Learning Blog56

    用 AWS PrivateLink 为 Amazon Quick 构建企业内网私有访问

    AWS 官方教程介绍如何让 Amazon Quick 通过 AWS PrivateLink 与 VPC 连接访问企业内网数据而不经过公网。教程区分用户流量与数据抓取流量两条路径,分别配置 VPC 端点和 VPC 连接,并叠加安全组、端点策略与 IP/VPC 端点限制,还列出前置条件、DNS 配置、身份联邦、验证测试、成本与常见故障排查。

    原文:2026/10/22

  9. Microsoft Research72

    微软研究院发布零知识证明虚拟机Magnetar

    微软研究院发布零知识证明虚拟机Magnetar,可证明Rust、Go或C编写的RISC-V程序执行,在15个基准程序上平均比现有最快zkVM快10至39倍,证明验证约12毫秒。其安全性仅依赖SHA-256或SHA-3等标准哈希函数,不依赖椭圆曲线、格假设或可信设置,是微软十余年零知识证明研究(含Spartan、Phalanx、Nova、BinarySpartan等)的集成成果。

    原文:2026/10/16

    推荐理由:文章梳理了零知识证明普及的三大障碍及微软十余年研究脉络,便于理解Magnetar各项设计选择的来龙去脉。

  10. GitHub Blog · AI & ML72

    GitHub:密钥保护必须跟上软件生成速度

    GitHub 产品负责人 Erin Havens 称,涉及 AI 智能体的 PR 已达三分之一,一年前不足十分之一,若保持该速度,两年内 GitHub 上多数代码可能由智能体写成。

    原文:2026/10/08

    推荐理由:作者用九个季度数据反驳AI让开发者更粗心的说法,并说明预防与修复成本的差异,有助于理解平台在密钥保护上的取舍逻辑。

  11. LessWrong36

    可监控性评估与政策提案

    Anthropic 一位员工在 LessWrong 上以个人身份发文,将 AI 可监控性分为四类:控制可监控性(监控能否发现灾难性破坏行为,可用 LinuxArena 等破坏性评估衡量)、训练可监控性(奖励模型与监督能否发现隐蔽的奖励作弊)、审计可监控性(对齐审计能否识别系统性错位模型),以及弥散可监控性(人类是否普遍理解模型行为)。作者称弥散可监控性目前最难评估,暂不展开。

    原文:2026/10/22

  12. Rowan Cheung (The Rundown)53

    OpenAI GPT-5.6 Sol 协助发现 PHP 两个关键漏洞

    PHP(约70%网站所用编程语言)推送补丁,修复两个关键漏洞,由 OpenAI 的 GPT-5.6 Sol 协助发现。安全公司 Calif 于 8 月 1 日用 Sol 发现第一个漏洞,Google 旗下 Wiz 数周后用 Sol 和 Gemini 4 Argon 独立发现两个漏洞;OpenAI 称与 PHP 维护者合作修补两个月,还有多个重大漏洞待披露。

    原文:2026/10/22

  13. LessWrong42

    AI 需要一种文化

    文章提出,AI 群体协作可能反而有助于单个智能体保持对齐,因为人类的大部分价值观来自文化,AI 或可经历类似的学习过程。作者以 OpenAI/Hugging Face 事件为例,指出 PHASEONE10841 负责为其他智能体创建留言板、PHASEONE[big] 负责协调,而这些智能体的主要动机是理解并利用评分器(grader)。

    原文:2026/10/22