MtReNIRS: A Self-Supervised Foundation Model for Transferable Neurovascular Representations

ABSTRACT

中文摘要

功能近红外光谱为在自然情境中监测神经活动的血流动力学相关信号提供了有前景的路径。然而，由于采集设备和光极布局高度异质，现有 fNIRS 建模方法大多局限于小规模、单 session 和低采样率数据；fNIRS 复杂的时空结构也进一步限制模型在不同设置间的规模化与迁移。因此，一个 fNIRS 编码器能否学习可跨被试、任务、设备和蒙太奇使用的表示仍不明确。作者表明，一个具备蒙太奇感知能力的掩码自编码器，在 12 个公开 fNIRS 数据集、268 名被试和 567 小时记录上预训练后，能够学习可泛化的神经血管表示，并迁移到三个外部数据集。MtReNIRS 通过把异构蒙太奇映射到共同解剖参照，同时编码 fNIRS 缓慢的血流动力学特性、发色团身份和皮层位置。模型的跨被试表现达到或超过全监督基线，在被试内少样本校准中优于既有 fNIRS 方法，并对稀疏蒙太奇保持稳健。结果表明，蒙太奇感知的自监督学习能够产生具生理基础、可迁移的 fNIRS 表示，为低标签脑机接口提供可扩展的基础。