ACVPR · 2026

fMRI-LM: Towards a Universal Foundation Model for Language-Aligned fMRI Understanding

Yuxiang Wei, Yanteng Zhang, Xi Xiao, Chengxuan Qian, Tianyang Wang, Vince D. Calhoun

CVPR 2026 主会 · CVF Open Access

fMRI基础模型语言对齐指令微调
官方原文 ↗
字号

OVERVIEW

论文概览

以五万余次 fMRI 扫描训练语言对齐的通用基础模型,把异质脑数据转换为可由大语言模型处理的表示。

ABSTRACT

中文摘要

fMRI 数据跨研究存在空间、任务和语义标注差异,阻碍统一模型训练。fMRI-LM 构建可适应异质扫描的脑信号 tokenizer,将 fMRI 表示映射到语言语义空间,再结合大语言模型和指令微调统一处理多类理解任务。预训练规模超过五万次扫描,覆盖不同数据来源与认知范式;评估关注跨任务迁移、少样本适配和语言条件下的脑活动理解。该工作把 fMRI 基础模型从固定标签预测推进到可用自然语言定义任务和输出的通用接口。

RESEARCH RELEVANCE

与你研究的关系

可作为统一脑模型的语言接口层,并与 brain–CLIP 视觉空间组成视觉—语言—脑三方共享表征。

LIMITATIONS

局限与核查重点

自然语言输出容易继承语言模型先验;需区分脑信号贡献、任务描述泄漏与真正的跨数据集泛化。

SOURCE

来源与原文

CVPR 2026 主会 · CVF Open Access

Yuxiang Wei, Yanteng Zhang, Xi Xiao, Chengxuan Qian, Tianyang Wang, Vince D. Calhoun. fMRI-LM: Towards a Universal Foundation Model for Language-Aligned fMRI Understanding. CVPR 2026 主会 · CVF Open Access. https://openaccess.thecvf.com/content/CVPR2026/papers/Wei_fMRI-LM_Towards_a_Universal_Foundation_Model_for_Language-Aligned_fMRI_Understanding_CVPR_2026_paper.pdf