跳到正文
原文
Berkeley AI Research·· 2026-03-13AI 评分53

SPEX 与 ProxySPEX 扩展 LLM 交互归因分析

Identifying Interactions at Scale for LLMs

AI 导读

Berkeley AI Research介绍 SPEX 和 ProxySPEX,用稀疏性、低阶性与层级结构,在大规模消融中定位影响 LLM 行为的关键交互。ProxySPEX 在保持 SPEX 性能的同时约减少 10x 消融,并被用于特征归因、训练数据归因和注意力头归因。两套算法已集成到 SHAP-IQ 仓库。

来源:Berkeley AI Research · bair.berkeley.edu