spaCy 作者 Matthew Honnibal:MIT 团队「GPT-6 Astra 直接改权重」一文有误导性
MIT CSAIL 的四位研究者 11 月 2 日发文称,GPT-6 Astra 能直接读写神经网络权重:光看权重就能说出网络是训练来做什么的,还能不经训练改动 Qwen3.5-0.8B 约 0.016% 的权重,把它的 MATH-500 成绩从 7.9% 提到 48.1%。开源库 spaCy 的作者 Matthew Honnibal 11 月 3 日撰文说,这篇文章写法有误导性:只看原始权重、不用工具、不运行网络的实验只有三个,对象都是 1.7 万到 17.2 万个权重的小网络;涉及真实语言模型的实验都靠 Astra 写 Python 代码,Qwen 实验还让模型跑了最多 50 批练习题。他认为这说明 Astra 能做人类机器学习工程师也能做的事,一两年前的模型做不到,但两种方法不该写成同一种能力。
为什么重要
帮读者分清 Astra 实验里哪些结果真的来自直接读权重,哪些靠写代码和反复试跑得到,避免高估这项能力。
来源1
由 dalao.ai 撰写:标题、摘要和“为什么重要”是我们自己的文字;事实以原始报道为准,著作权归原发布者所有。