ACVPR · 2026

More Natural, More Real: Object-aware Gaussian Splatting for 3D Visual Decoding from Human Brain

Haodong Jing, Dongyao Jiang, Jixin Wang, Junhao Jia, Yanshu Li, Yongqiang Ma, Nanning Zheng

CVPR 2026 · Computer Vision Foundation Open Access

fMRIEEGbrain-to-3D可控生成
官方原文 ↗
字号

OVERVIEW

论文概览

统一处理 fMRI 与 EEG,并把视觉、语义、颜色和多视角结构注入 3D Gaussian Splatting,实现脑信号到三维物体的生成。

ABSTRACT

中文摘要

BrainGS 面向三维视觉刺激的脑解码,使用融合时空网络编码 fMRI 与 EEG,再以多属性控制器把视觉、语义和颜色作为锚点解耦脑表征,并用多视角稳定器约束不同观察视角之间的一致性,最终驱动 3D Gaussian Splatting 重建三维物体。作者报告其在定性与定量评估中取得更真实且一致的结果。

RESEARCH RELEVANCE

与你研究的关系

它是统一脑编解码和可控生成的直接参考:同一框架处理两类脑信号,并用多种语义控制量驱动三维生成。

LIMITATIONS

局限与核查重点

需要进一步核查跨被试划分、fMRI 与 EEG 是否真正共享参数,以及指标提升是否来自生成先验。

SOURCE

来源与原文

CVPR 2026 · Computer Vision Foundation Open Access

Haodong Jing, Dongyao Jiang, Jixin Wang, Junhao Jia, Yanshu Li, Yongqiang Ma, Nanning Zheng. More Natural, More Real: Object-aware Gaussian Splatting for 3D Visual Decoding from Human Brain. CVPR 2026 · Computer Vision Foundation Open Access. https://openaccess.thecvf.com/content/CVPR2026/papers/Jing_More_Natural_More_Real_Object-aware_Gaussian_Splatting_for_3D_Visual_CVPR_2026_paper.pdf