敏感性分析

专家混合模型基于幅度专家掩码的深度感知敏感性分析

一项新研究提出了一种基于幅度专家掩码的深度感知敏感性分析方法，用于评估MoE模型中每一层的重要性，特别是在模型压缩的背景下。