#单目视频
相关项目
MonoHuman
MonoHuman框架利用单目视频生成高质量、视角一致的3D人体动画。通过双向变形约束和关键帧信息建模变形场,实现任意新姿势的高保真渲染。该技术在ZJU-Mocap数据集和自然场景视频中表现优异,为虚拟现实和数字娱乐领域提供了有力支持。
GauHuman
GauHuman是一种新型3D人体重建技术,利用单目人体视频学习关节化高斯散射模型。该方法训练速度快(1-2分钟),渲染实时(最高189 FPS),适用于ZJU-Mocap和MonoCap等数据集。GauHuman提供高效的训练和评估流程,在3D人体重建和渲染领域表现出色,为相关研究开辟新途径。
DG-Mesh
DG-Mesh是一个从单目视频重建高保真度时序一致网格的框架。它能够重建高质量的表面、外观和跨时间帧的网格顶点运动,支持灵活的拓扑变化,并能处理鸟翼等细结构。项目包含多个数据集的训练和评估代码,以及自定义数据集支持。
Consistent4D
Consistent4D是一种创新方法,能从未校准的单目视频生成动态物体的360度视图。该方法将360度动态物体重建转化为4D生成问题,利用物体级3D感知图像扩散模型监督动态神经辐射场的训练。Consistent4D引入级联DyNeRF和插值驱动的一致性损失,无需繁琐的多视图数据收集和相机校准。实验表明,该方法在4D动态物体生成和文本到3D生成任务中展现出优异性能。