近年来，Transformer模型在非侵入式负荷监测(NILM)应用中展现出令人印象深刻的性能。尽管取得了成功，但现有研究尚未彻底考察各种超参数对模型性能的影响，而这对于推进高性能Transformer模型至关重要。本研究进行了一系列全面的实验，以分析这些超参数在住宅NILM环境中的影响。本研究深入探讨了注意力层隐藏维度数量、注意力层数量、注意力头数量和 dropout 比率对Transformer性能的影响。此外，还探讨了BERT风格Transformer训练中掩码比率的作用，并对其在NILM任务中的影响进行了详细研究。基于这些实验，我们选择了最佳超参数，并用其训练了一个Transformer模型，该模型的性能超过了现有模型。实验结果为优化Transformer架构提供了宝贵的见解和指导，旨在提高其在NILM应用中的有效性和效率。预期这项工作将为未来更强大、更有效的NILM Transformer模型的研究和开发奠定基础。