Astra通过权重消融探究Qwen循环
先了解这件事
AI 综述
2026年11月3日,Hugging Face联合创始人兼首席科学官Thomas Wolf在X上发布消息称,Astra似乎并未原生读取Qwen权重,而是使用代码执行标准可解释性技术,发现Qwen存在一个循环方向,并将其从权重中消融。他据此推测,Qwen会陷入循环,因而无法回答问题。该帖仅披露了上述分析与消融结果,未提供更多实验细节。
报道时间线
11月3日
- Astra 消融 Qwen 权重中的循环方向
看起来 Astra 并没有原生读取 Qwen 的权重? 据我理解,Qwen 会陷入循环,无法回答问题。 Astra 使用代码执行了一些标准的可解释性技术,发现了一个循环方向,并将其从权重中消融。