LLM2D
基于微调变换器模型的 chirp 定位:一个概念验证研究
Chirp Localization via Fine-Tuned Transformer Model: A Proof-of-Concept Study
作者: Nooshin Bahador, Milad Lankarany
发布日期: 4/1/2025
arXiv ID: oai:arXiv.org:2503.22713v1

摘要

arXiv:2503.22713v1 交叉公告类型 摘要:光谱图在时频信号分析中至关重要,广泛应用于音频处理和计算神经科学中。脑电图(EEG)光谱图中的类似调频图案(标记为线性或指数频率扫频)是癫痫动态的关键生物标志物,但缺乏自动化工具用于检测、定位和特征提取。本研究通过在合成光谱图上微调Vision Transformer (ViT)模型,并结合Low-Rank Adaptation (LoRA) 提高适应性,填补了这一空白。我们生成了100000个带有调频参数的合成光谱图,创建了首个大规模的调频定位基准。这些光谱图使用线性或指数频率扫频、高斯噪声和平滑处理来模拟神经调频。一个经过回归适应的ViT模型预测了调频参数。LoRA对注意层进行了微调,使预训练骨干能够高效更新。训练使用了均方误差损失和AdamW优化器,并采用学习率调度和早期停止来防止过拟合。只针对三个特征:调频起始时间(起始时间)、调频起始频率(起始频率)和调频结束频率(结束频率)。性能通过皮尔逊相关系数评估预测和实际标签之间的关系。结果显示出强烈的对齐性:调频起始时间的皮尔逊相关系数为0.9841,推断时间稳定(137至140秒),错误分布中的偏差也最少。该方法提供了一个在EEG时频表示中进行调频分析的工具,填补了关键的方法空白。