返回
Singular values-driven automated filter pruning
DOI:10.1016/j.neunet.2025.107857.png)
摘要
En 中文
本文提出SLIMING(基于奇异值驱动的自动滤波器剪枝),一种利用奇异值将剪枝过程形式化为滤波器张量优化问题的自动滤波器剪枝方法。认识到该原始表述存在组合挑战,我们提出用两步过程替代:①确定剪枝配置,指定每层保留的滤波器数量;②选择具体的滤波器。我们证明该方法确保在整个剪枝过程中保留滤波器的多维结构。针对每一步,我们提出了相应的求解算法。为验证各部分,我们在一个过参数化的合成玩具示例上进行了数值仿真。此外,我们在八个架构、四个基准数据集和四个视觉任务上进行了广泛仿真,验证了本框架的有效性。我们的代码可供研究使用,地址为sliming-ai.github.io。
Keyword:
Matrix and tensor decompositions
HOSVD
Structured pruning
Automated pruning
Network compression

