#mechanistic interpretability
Astra 读写 Qwen 权重说法被指误导
7/10honnibal.dev · ⭐️ 7/10 · 2026-11-04
一篇在 Hacker News 上引发讨论的博客文章反驳“Astra 能通过读写权重来改进 Qwen”的说法,认为相关表述具有误导性。一名自称从事机制可解释性研究的评论者同意这一判断,并指出关键结果与提升 Qwen 的数学能力无关,实际只是减少推理循环——模型生成结束思考的 </think> token 概率过低,可通过简单的激活引导修正。其他评论则质疑 Astra 的权重编辑与既有技术高度重叠,或认为原文正文其实已经解释了文章现在总结的内容。
Nick Cammarata 称神经网络“干净”,引发可解释性争论
7/10already-clean.goodfire.com · ⭐️ 7/10 · 2026-10-16
Nick Cammarata 在 X 上发布并推广一项论证,主张神经网络比此前假设的更“干净”、更容易解释;他称自己曾在 OpenAI 参与机械可解释性早期研究,当时因网络看似混乱而持悲观态度,如今认为有好消息。该条目本身只提供指向这条推文的链接,未包含底层博客正文,因此其技术主张无法在现有材料中核实。Hacker News 上的讨论随即展开,核心争议在于这些结论是否超出了已有证据所能支持的范围。