Continuous-Latent Predictive Modeling with Semantic Alignment for EEG-Language Foundation Models

ABSTRACT

中文摘要

近期 EEG 基础模型表明，大规模预训练有望实现跨被试、跨记录环境和跨数据集的通用神经解码。然而，主流预训练范式仍存在关键问题：掩码自编码往往优先恢复低层信号，而不是学习任务相关语义；自回归建模则在连续神经动力学与离散 token 空间之间制造了表征不匹配。因此，需要新的方法将连续 EEG 表征与自然语言语义有效对齐，并支持其与大语言模型结合。作者提出脑潜变量预测模型（Brain Latent Predictive Model，BLPM），把异构 EEG 解码任务重新表述为连续语义嵌入预测。BLPM 包含连续 EEG 潜变量预测（Continuous EEG Latent Predictive，CELP）编码器，通过预测潜在目标而不是重建原始波形来学习可迁移表征。在此基础上，多查询语义分解（Multi-Query Semantic Decomposition，MQSD）模块提取任务相关信息，并依据语义关系，在共享潜在空间中把连续 EEG 表征与文本语义对齐。多个基准上的实验显示，模型在不同任务中取得一致的泛化表现，说明连续潜在语义预测可以成为 EEG—语言基础模型的一种有效预训练范式。