近年来，脑电图 (EEG) 分析领域取得了显著进展，这得益于机器学习和人工智能的融合。本综述旨在概括最新进展，重点关注即将改变我们对脑活动理解和解释的新方法和技术。我们深入研究了能够实现脑信号稳健表示的自监督学习方法，这对于各种下游应用至关重要。我们还探讨了新兴的判别方法，包括图神经网络 (GNN)、基础模型和基于大型语言模型 (LLMs) 的方法。此外，我们还考察了利用 EEG 数据生成图像或文本的生成技术，为脑活动可视化和解释提供了新的视角。本综述全面概述了这些尖端技术、它们目前的应用以及它们对未来研究和临床实践的深远意义。相关文献和开源材料已汇集并持续更新于 \url{https://github.com/wpf535236337/LLMs4TS}。
arXiv:2410.08216v1 类型: cross
摘要：本文研究了人工智能（AI）在军事领域的集成所引发的新兴挑战，特别是在联合国安理会决议1540（UNSCR 1540）的背景下，该决议旨在防范大规模杀伤性武器（WMDs）的扩散。虽然该决议最初关注的是核武器、化学武器和生物武器威胁，但人工智能的快速进步引入了新的复杂性，这些复杂性在最初并未预见。我们批判性地分析了人工智能如何加剧现有与WMDs相关的风险（例如，通过部署自杀式无人机和杀手机器人）并引入新型威胁（例如，通过利用生成型AI的技术潜力），从而损害国际和平与安全。本文呼吁扩展UNSCR 1540，以应对AI技术在WMDs的开发、传播和潜在滥用方面的日益影响，敦促制定治理框架以减轻这些新兴的风险。
本文提出了一种将训练好的神经网络（NN）集成到有限元（FE）框架中的实用方法，方法是使用用户材料（UMAT）子程序。该工作以晶体塑性为例，这是一种复杂的非弹性非线性路径依赖材料响应，在 ABAQUS UMAT 中有着广泛的应用。然而，这种方法可以扩展到其他材料行为和 FE 工具。使用 UMAT 子程序有两个主要目的：(1) 它直接从应变历史预测和更新应力或其他感兴趣的机械特性；(2) 它通过反向传播或数值微分计算雅可比矩阵，这在求解收敛中起着至关重要的作用。通过在 UMAT 子程序中实现 NN，可以在 FEM 框架内将训练好的机器学习模型用作数据驱动的本构定律，从而保留传统本构定律经常忽略或平均的多尺度信息。这种方法的多功能性使其成为将机器学习集成到机械模拟中的强大工具。虽然这种方法有望在再现真实材料行为方面提供更高的精度，但必须特别注意解过程的可靠性和收敛条件。虽然模型的理论在 [Heider 等人，2020] 中有解释，但示例源代码也已提供给感兴趣的读者 [https://doi.org/10.25835/6n5uu50y]。
我们提出了首个针对生成式图像模型的不可检测水印方案。不可检测性确保任何有效的攻击者都无法区分水印图像和未加水印图像，即使在进行多次自适应查询后也是如此。特别是，不可检测水印不会在任何可有效计算的指标下降低图像质量。我们的方案通过使用伪随机纠错码（Christ and Gunn，2024）选择扩散模型的初始潜在变量来实现，这种策略保证了不可检测性和鲁棒性。我们通过实验验证了我们的水印在使用 Stable Diffusion 2.1 时能够保持质量和鲁棒性。我们的实验验证了，与我们测试过的所有先前方案相比，我们的水印不会降低图像质量。我们的实验还证明了鲁棒性：现有的水印去除攻击无法从图像中去除我们的水印，而不会显著降低图像质量。最后，我们发现我们可以在水印中稳健地编码 512 位，而在图像没有受到水印去除攻击的情况下，可以编码高达 2500 位。我们的代码可在 https://github.com/XuandongZhao/PRC-Watermark 获取。
隐式神经表示（INRs）已在多种应用中展现出成功，包括逆问题和神经渲染。INR 通常被训练来捕获一个感兴趣的信号，从而得到高度适应于该信号的学习神经特征。我们假设这种学习的神经特征的泛化能力较弱，因此探索了将这些学习的神经特征用于拟合类似信号的可迁移性。我们引入了一种新的 INR 训练框架 STRAINER，该框架学习可迁移特征，用于更快地将 INR 拟合到给定分布中的新信号，并具有更好的重建质量。由于 INR 中的顺序逐层仿射运算，我们建议通过共享多个 INR 中的初始编码器层（具有独立的解码器层）来学习可迁移表示。在测试时，学习的编码器表示被转移作为初始化，用于一个否则随机初始化的 INR。我们发现 STRAINER 为拟合来自同一域的图像提供了极其强大的初始化，并且与未经训练的 INR 本身相比，在信号质量方面早期获得了约 +10dB 的增益。STRAINER 还提供了一种简单的方法来在 INR 中编码数据驱动的先验。我们在多个域内和域外信号拟合任务和逆问题上评估了 STRAINER，并进一步对 STRAINER 特征的可迁移性进行了详细的分析和讨论。我们的演示可以访问 https://colab.research.google.com/drive/1fBZAwqE8C_lrRPAe-hQZJTWrMJuAKtG2?usp=sharing。
本文对用于消除MRI系统中电磁干扰（EMI）的传统方法和深度学习方法进行了全面分析。我们探讨了传统分析和自适应EMI消除技术的底层原理和实现，以及尖端的深度学习方法。通过详细的比较，突出了每种方法的优缺点。文章讨论了利用多个外部EMI接收线圈和分析技术的主动EMI消除的最新进展，以及深度学习方法的优越性能，这些方法利用在大量MRI数据上训练的神经网络。虽然深度学习方法在EMI抑制方面取得了显著改进，增强了诊断能力和MRI技术的可及性，但也带来了潜在的安全和安全问题，尤其是在生产和商业应用中。本研究强调了需要解决这些挑战，以充分发挥深度学习在EMI消除中的优势。研究结果表明，应采用平衡的方法，将传统方法的可靠性与深度学习的先进能力相结合，以开发更强大、更有效的MRI系统EMI抑制策略。
文本到图像扩散模型存在生成过时、受版权保护、不正确和有偏见内容的风险。虽然之前的方法在小范围内缓解了这些问题，但在更大规模的现实世界场景中同时处理这些问题至关重要。我们提出了一种两阶段方法，即在扩散模型中编辑海量概念（EMCID）。第一阶段对每个单独的概念进行内存优化，使用来自文本对齐损失和扩散噪声预测损失的双重自蒸馏。第二阶段通过多层闭式模型编辑进行海量概念编辑。我们进一步提出了一个综合基准，称为 ImageNet 概念编辑基准 (ICEB)，用于评估 T2I 模型的海量概念编辑，包括两个子任务，即自由格式提示、海量概念类别和广泛的评估指标。在我们提出的基准和之前的基准上进行的大量实验表明，EMCID 在编辑多达 1000 个概念方面具有优越的可扩展性，为在现实世界应用中快速调整和重新部署 T2I 扩散模型提供了一种实用方法。
从正样本和未标记样本（PUL）中学习二元分类器在许多现实世界应用中至关重要，尤其是在验证负样本很困难的情况下。尽管最近的 PUL 方法取得了令人印象深刻的经验性能，但由于缺乏负标签，累积误差和估计偏差增加等挑战依然存在。在本文中，我们揭示了 PUL 中一个有趣且长期被忽视的观察结果：\textit{在每次训练迭代中对正样本进行重采样以确保正样本和未标记样本之间的平衡分布会导致早期阶段的强劲性能。此外，正类和负类的预测趋势表现出明显不同的模式。}具体而言，未标记负样本的分数（输出概率）始终下降，而未标记正样本的分数则表现出很大程度的混乱趋势。我们并没有专注于单个时间框架内的分类，而是创新性地采用了一种整体方法，将每个样本的分数解释为一个时间点过程（TPP）。这将 PUL 的核心问题重新定义为识别这些分数中的趋势。然后，我们提出了一种新颖的受 TPP 启发的趋势检测度量，并证明了其在预测变化方面的渐近无偏性。值得注意的是，我们的方法在无需额外参数调整或先验假设的情况下实现了 PUL，为解决此问题提供了一种替代视角。大量实验验证了我们方法的优越性，尤其是在高度不平衡的现实世界环境中，该方法在关键指标上实现了高达 $11.3\%$ 的改进。代码可在 \href{https://github.com/wxr99/HolisticPU}{https://github.com/wxr99/HolisticPU} 处获取。
近年来，知识图谱 (KG) 已成功地与大型语言模型 (LLM) 相结合，以缓解其幻觉问题并增强其推理能力，例如在基于 KG 的检索增强框架中。然而，当前的 KG-LLM 框架缺乏严格的不确定性估计，限制了它们在高风险应用中的可靠部署。由于其复杂的架构以及知识图谱和语言模型组件之间错综复杂的交互，直接将不确定性量化纳入 KG-LLM 框架面临挑战。为了填补这一空白，我们提出了一种新的可信 KG-LLM 框架，即不确定性感知知识图谱推理 (UAG)，该框架将不确定性量化纳入 KG-LLM 框架。我们设计了一个不确定性感知的多步推理框架，该框架利用一致性预测来提供对预测集的理论保证。为了管理多步过程的错误率，我们还引入了错误率控制模块，以调整各个组件内的错误率。大量实验表明，我们提出的 UAG 可以实现任何预定义的覆盖率，同时与基线相比，平均将预测集/区间大小减少 40%。
可转移信任模型作为 Dempster-Shafer 理论的语义解释，使代理能够在不精确和不完整环境中进行推理和决策。该模型为处理不可靠的证词提供了独特的语义，与贝叶斯方法相比，它允许更合理和更通用的信念转移过程。然而，由于在更新信念函数时必须同时考虑信念质量和焦点集的结构，这会导致推理过程中的额外计算复杂性，因此可转移信任模型在最近的发展中逐渐不受研究人员的青睐。本文在量子电路中实现了可转移信任模型，并证明了信念函数在量子计算框架内提供了比贝叶斯方法更简洁、更有效的替代方案。此外，利用量子计算的独特特性，我们提出了几种新颖的信念转移方法。更广泛地说，本文介绍了对量子人工智能模型基本信息表示的新视角，表明信念函数比贝叶斯方法更适合处理量子电路上的不确定性。