arXiv:2502.13107v3 宣告类型: 修改 摘要：理解和预测无机材料的性质对于加速材料科学的进步以及在能源、电子等领域中的应用至关重要。通过多模态大型语言模型（LLMs）将材料结构数据与基于语言的信息相结合，为增强人类与AI的交互提供了巨大的潜力。然而，一个关键挑战在于如何将原子结构在全分辨率下整合到LLMs中。在本文中，我们介绍了MatterChat，这是一个多功能结构感知多模态LLM，它将材料结构数据和文本输入统一到一个连贯的模型中。MatterChat采用了一个连接模块，有效地将预训练的机器学习原子间势与预训练的LLM对齐，从而降低训练成本并提高灵活性。我们的结果显示，MatterChat在材料性质预测和人类与AI交互方面显著提高了性能，超过了诸如GPT-4等通用型LLMs。我们还展示了它在更先进的科学推理和逐步材料合成等应用场景中的实用性。