arXiv（brain-computer interface）·· 16 天前AI 评分48
Neurons++：面向 fMRI 图像与视频重建的统一视觉流框架
Neurons++: A Unified Visual-Stream Framework for Image and Video Reconstruction from fMRI with Neural-to-Visual Interpretability
AI 导读
Neurons++ 是一个基于 fMRI 的统一视觉流重建框架，可同时重建静态图像与动态视频，相较会议版本 Neurons 从仅视频重建扩展到图像与视频，并以串行皮层启发式解码替代并行任务条件化。
AI 要点
团队
第一作者 Haonan Wang，末位作者 Xiaomeng Li，共 7 位作者。
主要结果
在标准基准上实现最先进的视频重建和有竞争力的图像重建；神经到视觉分析显示其在神经扰动下具有定性方向可控性。
解决什么问题
生成式解码虽能重建看似合理的图像和视频，但视觉合理性不足以确保输出忠实于大脑活动。
方法
先用图像-fMRI 预训练获得稳定的空间-语义初始化，再分别针对图像和视频重建做被试特异性微调；串行设计将 fMRI 表征组织为空间、语义、语言层面和时间线索。
局限
从研究设计看，未设对照，且未报告受试者数量。
AI 依据原文整理，未经人工核对。
来源：arXiv（brain-computer interface） · arxiv.org