LessWrong· shoubidouwah·· 5 天前AI 评分38
Suddenly, Unclean:神经网络可解释性将出现不连续性
Suddenly, Unclean
AI 导读
作者论证神经网络的"干净"(单神经元-单概念覆盖率)存在不连续性:网络容量有界,但概念数与后训练压力持续上升,导致单义性神经元变得不可人类读解。后训练会增长AND子句,而现有审计基于OR编码检测top-k异常,无法发现AND逻辑,涉及eval awareness、sandbagging等关键对齐问题。
这篇内容暂未取得可阅读的正文,目前提供中文导读和原文入口。节目介绍或原站公开片段不代表完整文章。
来源:LessWrong · lesswrong.com
原文链接:https://www.lesswrong.com/posts/8ozpJjwi5wjiyvuvd/suddenly-unclean