SemVideo Reconstructs What You Watch from Brain Activity via Hierarchical Semantic Priors
Minghan Yang, Lan Yang, Ke Li, Honggang Zhang, Kaiyue Pang, Yi-Zhe Song
CVPR 2026 主会 · CVF Open Access
OVERVIEW
论文概览
用层级语义先验把脑活动中的场景、对象和动作线索注入视频重建。
ABSTRACT
中文摘要
脑活动到视频重建容易在生成过程中丢失关键对象或动作。SemVideo 将脑表征映射到多层视觉语义，包括场景级概念、对象级内容和动作/时间线索，并利用这些条件引导视频生成。层级设计允许不同脑信号成分分别约束生成过程，作者通过语义指标、视频质量和消融实验比较各层先验的贡献，重点验证是否能更稳定地恢复被观看视频的主要内容。
RESEARCH RELEVANCE
与你研究的关系
与可控生成直接相关，可把不同 ROI 或潜变量干预映射到场景、对象和动作三个可分离控制层。
LIMITATIONS
局限与核查重点
语义指标可能偏向生成模型可识别内容；需要核查细粒度动态是否由脑信号真实指定。
SOURCE
来源与原文
CVPR 2026 主会 · CVF Open Access
Minghan Yang, Lan Yang, Ke Li, Honggang Zhang, Kaiyue Pang, Yi-Zhe Song. SemVideo Reconstructs What You Watch from Brain Activity via Hierarchical Semantic Priors. CVPR 2026 主会 · CVF Open Access. https://openaccess.thecvf.com/content/CVPR2026/html/Yang_SemVideo_Reconstructs_What_You_Watch_from_Brain_Activity_via_Hierarchical_CVPR_2026_paper.html