跳到正文
arXiv · 机器人与计算机视觉· Yukai Huang, Haoyu Albert Wang, Jiawei Zhang, Jialun Ma, Jiayao Ding, Yiran Lin, Xingyu Chen, Ziqi Gao, Yuguo Yu·· 10 天前AI 评分45

Ca2REAL 解码大规模视觉皮层活动以重建自然电影

Decoding spatial and semantic information from large-scale visual cortical activity for natural-movie reconstruction

AI 导读

Ca2REAL 框架利用单只小鼠 7,863 个 V1 神经元测量响应,通过布局与语义控制条件化预训练视频扩散模型,实现自然电影片段重建。该框架在独立测试集上达到 81.4% 的全对刺激识别准确率,显著优于确定性基线并在感知与语义指标表现更佳。研究还验证了其在由 116,705 个神经元组成的虚拟群体中的有效性,证明大规模皮层活动能约束视觉体验的空间、语义及时间结构。

来源:arXiv · 机器人与计算机视觉 · arxiv.org