LLM2D
CPU 设计空间探索中的多目标优化:只需关注点(Attention is All You Need)
Multi-objective Optimization in CPU Design Space Exploration: Attention is All You Need
作者: Runzhen Xue, Hao Wu, Mingyu Yan, Ziheng Xiao, Xiaochun Ye, Dongrui Fan
发布日期: 4/10/2025
arXiv ID: oai:arXiv.org:2410.18368v1

摘要

arXiv:2410.18368v1 Announce Type: cross 摘要:架构空间探索(DSE)使架构师能够系统地评估各种设计选项,指导如何选择最合适的配置以满足特定目标,如优化性能、功率和面积。然而,现代CPU日益增长的复杂性大幅增加了微架构参数的数量,并扩展了总体设计空间,这使得DSE更加复杂和耗费时间。现有的DSE框架在大规模设计空间中遇到困难,因为模型不够准确,且对参数影响的见解有限,阻碍了在短时间内有效地识别出最优微架构设计。 在这项工作中,我们引入了AttentionDSE。它的主要思想是使用注意力机制建立微架构参数与其对预测性能贡献之间的直接映射。这种方法提高了性能模型的预测准确性和可解释性。此外,权重可以根据设计变化动态调整,使模型能够响应设计变化,并有效地指出导致性能瓶颈的关键微架构参数/组件。因此,AttentionDSE能够准确、有针对性地并快速地发现最优设计。在SPEC 2017的实验中,AttentionDSE将探索时间显著减少了80%以上,并且在参数数量不断增加的情况下,其预测准确性和效率优于最先进的DSE框架,同时在Pareto Hypervolume上实现了3.9%的改善。