BrainCodes: A Lightweight EEG Foundation Model over Discrete Neural Codes
Kleanthis Avramidis, Ivan Tashev, Dimitra Emmanouilidou
arXiv:2610.29320v1 · 2026-10-21 提交
ABSTRACT
中文摘要
近期 EEG 基础模型越来越强调模型规模，这可能限制其在资源受限设备和日常环境中的部署。作者提出 BrainCodes：一个通过自监督学习在超过 800 小时、1,000 多名参与者记录上预训练的轻量基础模型，并主张紧凑架构也能学习可迁移 EEG 特征。模型结合基于量化的神经 tokenizer 与支持任意电极配置的时空编码器。预训练目标通过通道位置编码鼓励表示捕捉空间连接，并通过辅助目标增强对窄带神经振荡的敏感性。在睡眠分期、注意评估和认知负荷估计等多种神经生理监测任务上，模型达到或超过作者比较的先进方法；迁移到低资源可穿戴设备时，所需可训练参数最多减少 97%。除预测准确率外，作者还从可测量的空间、时间与频谱信号属性出发，分析学到表示的几何结构和不变性。
RESEARCH RELEVANCE
与你研究的关系
论文事实：BrainCodes 用离散神经代码、通道位置和振荡辅助目标，在大规模异构 EEG 上训练一个可支持任意电极配置的紧凑模型，并评估低资源设备迁移及表示不变性。研究推断：它可作为统一 fMRI–EEG 模型的轻量 EEG 前端；离散代码适合处理设备和电极缺失，但需要额外验证代码是否保留刺激语义，而不只是任务、设备或频带统计。
LIMITATIONS
局限与核查重点
主要下游任务是睡眠、注意和认知负荷监测，没有脑到图像、文本或视频解码，因此不能由基础模型标签推断开放内容能力。摘要未充分说明跨数据集测试是否彻底排除预训练来源、个体是否严格去重，以及任意电极布局对空间关系的真实泛化范围。参数减少与准确率匹配也需要计算量、延迟和数据预算一致的基线。当前为审稿中预印本。
SOURCE
来源与原文
arXiv:2610.29320v1 · 2026-10-21 提交
Kleanthis Avramidis, Ivan Tashev, Dimitra Emmanouilidou. BrainCodes: A Lightweight EEG Foundation Model over Discrete Neural Codes. arXiv:2610.29320v1 · 2026-10-21 提交. https://arxiv.org/abs/2610.29320