LLM2D
使用组件感知图分析的多组件神经架构增强剪枝策略
Enhanced Pruning Strategy for Multi-Component Neural Architectures Using Component-Aware Graph Analysis
作者: Ganesh Sundaram, Jonas Ulmen, Daniel G\"orges
发布日期: 4/21/2025
arXiv ID: oai:arXiv.org:2504.13296v1

摘要

arXiv:2504.13296v1 宣告类型:交叉 摘要:深度神经网络(DNNs)提供了出色的性能,但它们的复杂性往往阻碍了在资源受限环境中的部署。基于参数相关性分析的全面结构化剪枝框架减少了模型大小,特别关注计算性能。当将它们应用于多组件神经架构(MCNAs)时,它们有通过移除大参数组来损害网络完整性的风险。我们提出了一种组件感知的剪枝策略,扩展依赖图以隔离单个组件和组件间流。这创建了更小、更具体的剪枝组,以保留功能性完整。在控制任务上证明了其有效性,我们的方法实现了更高的稀疏性和减少的性能下降,为优化复杂的多组件DNNs开辟了高效的道路。