arXiv · 机器人与计算机视觉· Yanchen Wang, Lenny Aharon, Wangshu Zhu, Kyle Daruwalla, Linghua Zhang, Jiaru Zou, Selmaan Chettih, Helen Hou, Liam Paninski, Matthew R Whiteway·· 13 天前AI 评分8
BEAST3D:通过高斯泼溅实现多视角视频下的动物行为分析与神经编码
BEAST3D: Animal behavioral analysis and neural encoding from multi-view video via Gaussian splatting
AI 导读
BEAST3D 是一个自监督预训练框架,利用视觉 Transformer 预测 3D 高斯泼溅以重构实验室稀疏视角(最少四视图)下的动物三维结构并分割背景。该模型在四种物种上验证了视点不变特征,成功迁移至新视角合成、多视角姿态估计及神经编码三项下游任务。相比需密集重叠视点的通用重建模型,BEAST3D 直接利用已知相机参数解决了实验场景中的几何估计难题。
来源:arXiv · 机器人与计算机视觉 · arxiv.org