Taming foundation model with invariance-oriented pre-training for broad-spectrum EEG analysis across signal-level, brain-state, and brain-health tasks

ABSTRACT

中文摘要

EEG 模型长期依赖一个数据集训练一个监督模型的范式；近期 EEG 基础模型试图学习可复用表征，但多数方法以重建为中心，隐含假设是能从局部上下文恢复的信号内容也一定是可迁移的神经信息。作者提出 INCEPT，一种面向不变性的 EEG 基础模型，在超过 1.1 万小时的无标签临床 EEG 上预训练。模型不把恢复原始信号作为唯一重点，而是学习相关 EEG 观测之间的表征稳定性，从头皮记录中占主导的干扰变化里分离稳定神经结构和必要的被试敏感信息，同时保留区分被试、脑状态和健康状况的内容。作者在十个数据集上构建覆盖信号级评估、脑状态解码和脑健康评估的宽谱基准。INCEPT 在 30 项线性探测指标中的 26 项、30 项微调指标中的 24 项排名第一，并在多种下游设置中超过强任务专用编码器。目标函数消融和表征分析进一步表明，不变性导向预训练能够改善迁移，并形成超越简单重建的、具有被试信息组织结构的神经表征。