CineBrain: A Large-Scale Multi-Modal Audiovisual Brain Dataset for Brain-Conditioned Video Generation
Jianxiong Gao, Yichang Liu, Baofeng Yang, Jianfeng Feng, Yanwei Fu
CVPR 2026 主会 · CVF Open Access
OVERVIEW
论文概览
同步采集自然视听刺激下的 fMRI 与 EEG，并建立脑信号条件视频生成基准，为统一时空脑模型提供配对数据。
ABSTRACT
中文摘要
现有视觉脑解码数据多为静态图像或单一脑信号模态，难以研究连续视听感知。CineBrain 提供约六小时自然视听刺激下同步采集的 fMRI 与 EEG 数据，并保留视频、音频和脑响应的时间对应关系。作者进一步提出 CineSync，用于联合建模 fMRI 的空间信息、EEG 的时间动态和视听语义，以支持脑条件视频生成与跨模态检索。数据集和基线强调自然场景、长时间序列以及两类脑信号互补信息。
RESEARCH RELEVANCE
与你研究的关系
它为你设想的 fMRI+EEG 统一编解码提供罕见的同步数据基础，也能检验共享、模态特异和被试特异潜变量。
LIMITATIONS
局限与核查重点
数据规模按生成模型标准仍有限；需要检查被试数量、同步精度、训练测试影片划分和视听先验泄漏。
SOURCE
来源与原文
CVPR 2026 主会 · CVF Open Access
Jianxiong Gao, Yichang Liu, Baofeng Yang, Jianfeng Feng, Yanwei Fu. CineBrain: A Large-Scale Multi-Modal Audiovisual Brain Dataset for Brain-Conditioned Video Generation. CVPR 2026 主会 · CVF Open Access. https://openaccess.thecvf.com/content/CVPR2026/papers/Gao_CineBrain_A_Large-Scale_Multi-Modal_Audiovisual_Brain_Dataset_for_Brain-Conditioned_Video_CVPR_2026_paper.pdf