跳到正文
arXiv · 机器人与计算机视觉· Yanchen Wang, Lenny Aharon, Wangshu Zhu, Kyle Daruwalla, Linghua Zhang, Jiaru Zou, Selmaan Chettih, Helen Hou, Liam Paninski, Matthew R Whiteway·· 13 天前AI 评分8

BEAST3D:通过高斯泼溅实现多视角视频下的动物行为分析与神经编码

BEAST3D: Animal behavioral analysis and neural encoding from multi-view video via Gaussian splatting

AI 导读

BEAST3D 是一个自监督预训练框架,利用视觉 Transformer 预测 3D 高斯泼溅以重构实验室稀疏视角(最少四视图)下的动物三维结构并分割背景。该模型在四种物种上验证了视点不变特征,成功迁移至新视角合成、多视角姿态估计及神经编码三项下游任务。相比需密集重叠视点的通用重建模型,BEAST3D 直接利用已知相机参数解决了实验场景中的几何估计难题。

来源:arXiv · 机器人与计算机视觉 · arxiv.org