LLM2D
位置:由于糟糕的基准测试,图学习将会失去相关性
Position: Graph Learning Will Lose Relevance Due To Poor Benchmarks
作者: Maya Bechler-Speicher, Ben Finkelshtein, Fabrizio Frasca, Luis M\"uller, Jan T\"onshoff, Antoine Siraudin, Viktor Zaverkin, Michael M. Bronstein, Mathias Niepert, Bryan Perozzi, Mikhail Galkin, Christopher Morris
发布日期: 2/21/2025
arXiv ID: oai:arXiv.org:2502.14546v1

摘要

arXiv:2502.14546v1 种类: cross 摘要: 虽然图上的机器学习在药物设计和分子性质预测方面展现了潜力,但在进一步发展和实际应用中的基准测试挑战仍然限制着其应用范围和相关性。当前的基准测试实践往往缺乏对变革性、实际应用的关注,更倾向于关注如二维分子图等狭窄领域,而不是更广泛、更具影响力的领域,如组合优化、关系数据库或芯片设计。此外,许多基准数据集未能恰当地代表底层数据,导致不充分的抽象和错位的应用场景。碎片化的评估以及对准确性的过度关注进一步加剧了这些问题,激励了过度拟合而非促进了泛化的见解。这些局限性阻碍了真正有用的图基础模型的发展。本文呼吁向更具意义的基准测试、严格的评估协议以及与领域专家更紧密的合作转变,以驱动图学习研究中具有影响力和可靠性的进展,释放图学习的潜力。