#3D重建
zero123
探索一种创新技术,通过一张图像实现高精度的3D对象重建。研究介绍了如何使用Zero123进行新视角合成和3D重建,解决了文字转图像模型中的视角歧义问题,并展示了其在多种应用中的卓越性能。项目还包括Zero123-XL和Objaverse-XL的最新权重发布,以及详细的使用和训练指南,支持研究者和开发者在现有硬件上进行开发和测试。
Instant-angelo
Instant-angelo项目旨在在20分钟内实现高保真的数字孪生三维重建,特别适合移动设备捕获的RGB视频。通过使用UniSDF等技术,能够逼真地重建反射物体。项目支持平滑和细节重建模式,分别适用于简单和复杂表面。提供详细的安装和数据准备指南,并支持自定义数据集。了解如何高效地完成高质量神经表面的重建,体验快速稳定的三维模型生成。
ICON
ICON项目利用法线预测实现穿衣人体的隐含表达,从RGB图像生成高细节的3D模型,包括衣服和人体网格。项目支持多种基于PyTorch的模型,适合不同训练和评估需求。最新发布的ECON在此基础上进一步改进了功能。
ScanNet
ScanNet是一个丰富的RGB-D视频数据集,包含超过1500次扫描和2.5百万个视图,包括3D相机姿态、表面重建和实例级语义分割标签。用户需通过机构邮箱填写使用协议以下载数据。数据按RGB-D序列组织,包含多种格式的重建网格和注释文件。附带工具有ScanNet C++工具包、相机参数估计代码和网格分割代码。本数据集支持多项场景理解基准任务,并提供相关代码与文档。
Make-It-3D
Make-It-3D项目利用训练良好的2D扩散模型,从单个图像生成高质量3D内容。方法采用两阶段优化流程,先优化神经辐射场整合正视图和新视角的扩散先验,后将粗略模型转化为纹理点云并提升现实感。实验显示,该方法在视觉质量和重建准确性上大幅领先,并支持文本到3D创建和纹理编辑等应用。
Wonder3D
Wonder3D是一个开源的3D重建项目,采用跨域扩散技术从单一图像生成高质量3D模型。该方法首先生成多视图法线贴图和彩色图像,然后通过法线融合实现快速重建。项目提供了推理和训练代码,支持自定义数据训练,并包含使用说明和演示。Wonder3D在重建速度和质量上均有优势,为3D内容创作提供了高效解决方案。
toon3d
Toon3D是一个开源项目,致力于将非几何一致性场景(如卡通)重建为3D模型。该项目利用少量2D卡通图像,通过自定义的SfM(Structure from Motion)流程实现3D重建。Toon3D提供了完整的数据处理、标注和重建工具链,使研究人员和开发者能够轻松探索和应用这一创新技术。项目的成果为计算机视觉、动画制作和游戏开发等领域开辟了新的研究方向。
neuralangelo
Neuralangelo是一个开源项目,专注于从图像重建高精度3D表面模型。该项目利用深度学习方法,提供了完整的代码实现,包括数据预处理、模型训练和网格提取功能。Neuralangelo在复杂场景重建中表现优异,适用于计算机视觉和图形学研究。项目文档包含详细使用说明和常见问题解答,便于研究人员快速上手。
SAX-NeRF
这个工具箱支持X光新视角合成(NVS)和计算机断层扫描(CT)重建,包含9种前沿算法:6种基于NeRF,2种基于优化,1种为分析方法。此外,提供了可视化代码和数据生成代码,支持科研工作。用户可以下载预训练模型和训练日志进行测试和调试,并生成自己的CT数据。详情请访问项目仓库。