Project Icon

AiOS

先进的全流程人体姿态与形状估计框架

AiOS是一个创新的人体姿态和形状估计框架,采用全新的全流程方法。该项目通过三阶段的渐进式处理,实现高精度的SMPL-X参数回归。AiOS支持多人场景分析,并能有效处理复杂遮挡情况。在AGORA和BEDLAM等多个基准数据集上,AiOS展现出卓越的性能表现。这一开源项目为计算机视觉和人机交互等领域提供了有力的研究工具。

FoundationPose - 创新性6D物体姿态估计与跟踪的统一框架
6D物体姿态估计FoundationPoseGithub开源项目机器人应用物体跟踪计算机视觉
FoundationPose是一个统一的6D物体姿态估计和跟踪框架,支持基于模型和无模型两种方式。该框架无需微调即可应用于新物体,通过大规模合成训练、大型语言模型辅助和创新架构实现强大泛化能力。在多个公共数据集的评估中,FoundationPose在challenging场景下显著优于现有方法,即使减少假设也能达到与实例级方法相当的效果。
lightning-pose - 基于PyTorch Lightning的高效姿态估计框架
GithubLightning Pose姿态估计开源项目深度学习计算机视觉
Lightning Pose是一个基于PyTorch Lightning的姿态估计框架,利用NVIDIA DALI加速未标记视频的训练。框架集成了TensorBoard、FiftyOne和Streamlit等评估工具,支持已标记数据和未标记视频的模型训练与评估。项目还提供浏览器应用,涵盖数据标注、模型训练到结果可视化的完整流程。此外,团队开发的Ensemble Kalman Smoother (EKS)后处理器可与多种姿态估计包兼容。
DWPose - 基于两阶段蒸馏的高效全身姿态估计方法
COCO数据集ControlNetDWPoseGithub两阶段蒸馏全身姿态估计开源项目
DWPose是一种采用两阶段知识蒸馏的全身姿态估计方法。该项目提供多个不同规模的模型,在COCO-WholeBody数据集上表现出色。DWPose可替代OpenPose用于ControlNet,提升图像生成质量。项目开源了模型及相关代码,支持ONNX推理,并可与Stable Diffusion WebUI集成。
PHALP - 基于3D外观、位置和姿态预测的人体跟踪技术
3D外观预测GithubPHALP人体跟踪位置预测姿态预测开源项目
PHALP是一个开源的3D人体跟踪项目,利用人体3D外观、位置和姿态预测实现精确跟踪。该项目提供完整代码实现,包含安装指南、演示代码、数据集准备和评估工具。PHALP可处理视频文件、YouTube视频和图像目录等多种输入源,并具备多样化的可视化功能。这一工具为人体动作分析和计算机视觉研究提供了有力支持。
3DMPPE_ROOTNET_RELEASE - 单张RGB图像的相机距离感知的3D多人人体姿态估计实现
3D姿态估计GithubPyTorchRGB图像RootNet多人体姿态估计开源项目
此项目基于PyTorch实现了3D多人人体姿态估计,兼容多种公开的2D和3D数据集,如Human3.6M、MPII、MS COCO、MuCo-3DHP、MuPoTS-3D和3DPW。其特点包括代码简洁灵活、直观的人体姿态可视化,并支持不同单位系统的适配。项目还提供详细的训练和测试指南,旨在帮助用户在GPU环境下高效运行姿态估计算法。
TokenHMR - 基于令牌化姿态表示的人体网格重建新方法
GithubTokenHMR人体网格恢复姿态表示开源项目深度学习计算机视觉
TokenHMR采用阈值自适应损失缩放和令牌预测技术,通过令牌化和TokenHMR两个阶段提高3D人体网格重建精度。该方法在图像对齐和3D姿态估计方面均有良好表现,可用于图像和视频处理,对人体姿态和形状估计研究具有重要意义。
DigiHuman - 基于摄像头输入的3D角色全身动画生成系统
3D动画生成DigiHumanGithubUnity3D姿态估计开源项目面部动画
DigiHuman是一个开源的人工智能项目,通过摄像头输入自动生成3D角色模型的全身和面部动画。系统结合MediaPipe生成3D关键点和Unity3D渲染技术,实现了全身动作、面部表情等多种动画效果。支持多个混合形状动画、视频导出等功能,为3D虚拟角色动画制作提供了自动化解决方案。该项目支持多种3D模型类型,并优化了动画平滑度,为动画创作者和研究人员提供了创新工具和无限可能。
ml-hugs - 从单个视频重建可动画化人体和场景的3D技术
3D重建GithubHUGS人体高斯分层动画生成开源项目神经辐射场
HUGS是一种利用神经辐射场的计算机视觉技术,能从单个视频重建背景场景和可动画化的人体3D表示。该开源项目提供完整实现,包括数据准备、模型训练和评估脚本。HUGS支持三种训练模式:联合人体和场景、仅人体以及仅场景,适用于多种应用场景。在PSNR、SSIM和LPIPS等指标上,HUGS展现了优异的性能,为人体动画和场景重建研究提供了新思路。
AIOS - 嵌入大型语言模型的智能操作系统新范式
AIOSGithub大语言模型开源开源项目操作系统智能代理
AIOS是一个创新的大型语言模型(LLM)代理操作系统,将LLM嵌入操作系统作为智能核心。它解决LLM代理开发和部署中的调度、上下文切换和内存管理等问题,为开发者和用户打造优化生态系统。AIOS在OS内核之上提供LLM内核抽象,简化代理的安装、执行和使用,并通过SDK加速开发与部署流程。
GauHuman - 基于单目人体视频的高效3D重建与渲染技术
GauHumanGithub人体建模单目视频实时渲染开源项目高斯泼溅
GauHuman是一种新型3D人体重建技术,利用单目人体视频学习关节化高斯散射模型。该方法训练速度快(1-2分钟),渲染实时(最高189 FPS),适用于ZJU-Mocap和MonoCap等数据集。GauHuman提供高效的训练和评估流程,在3D人体重建和渲染领域表现出色,为相关研究开辟新途径。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能,包括文生视频、动态画面和形象生成等,帮助用户快速上手,创造专业级内容。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台,用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品,帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型,为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能,满足事务性工作的高频需求,帮助撰稿人节省精力,提高效率,优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号