Berkeley AI Research·· 2026-03-13AI 评分53
SPEX 与 ProxySPEX 扩展 LLM 交互归因分析
Identifying Interactions at Scale for LLMs
AI 导读
Berkeley AI Research介绍 SPEX 和 ProxySPEX,用稀疏性、低阶性与层级结构,在大规模消融中定位影响 LLM 行为的关键交互。ProxySPEX 在保持 SPEX 性能的同时约减少 10x 消融,并被用于特征归因、训练数据归因和注意力头归因。两套算法已集成到 SHAP-IQ 仓库。
来源:Berkeley AI Research · bair.berkeley.edu