Project Icon

open_x_embodiment

统一格式机器人数据集和RT-X模型

Open X-Embodiment项目整合多个开源机器人数据集,采用统一RLDS格式。它提供RT-1-X模型检查点,支持RGB图像输入和7维机械臂动作输出。项目包含数据集可视化和模型推理Colab示例,以及详细使用指南。这一开放资源促进机器人学习研究,简化数据处理和模型应用流程。

Awesome-Embodied-Agent-with-LLMs - 大语言模型在智能体研究与应用中的精选资源
Embodied AIGithubInteractive Embodied LearningLarge Language ModelsMulti-Agent LearningSelf-Evolving Agents开源项目
该项目汇集了使用大语言模型(LLMs)进行智能体(Embodied AI)研究的精选资源,涵盖自适应智能体、社交智能体、复杂应用、模拟学习、规划与操作、多智能体协调等专题。项目主页提供丰富的论文资料和最新研究进展,适合相关领域研究者和开发者参考,不断更新。
DRL-robot-navigation - 移动机器人深度强化学习自主导航方案
GazeboGithubROSTD3开源项目机器人导航深度强化学习
项目集成了ROS、Gazebo和PyTorch,构建了一个移动机器人深度强化学习导航框架。系统利用TD3算法训练机器人应对复杂环境,实现障碍物识别和目标导航。该方案为自主移动机器人研究提供了一个开源的实验平台。
humanplus - 先进AI系统实现人形机器人影随和模仿人类
GithubHumanPlus人形机器人姿态估计开源项目强化学习模仿学习
HumanPlus是一个开源AI项目,致力于提升人形机器人的影随和模仿能力。项目包含两个主要组件:用于模拟环境强化学习的Humanoid Shadowing Transformer (HST)和用于现实世界模仿学习的Humanoid Imitation Transformer (HIT)。此外,HumanPlus还提供全身姿态估计和相关硬件的代码库,为研究人员和开发者提供完整的技术平台,推动人形机器人与人类互动技术的发展。
LIBERO - 机器人学习知识转移基准平台
GithubLIBERO开源项目强化学习操作任务机器人学习知识迁移
LIBERO是一个致力于研究多任务和终身机器人学习中知识转移的基准平台。它包含130个分组任务、过程生成管道、5个研究主题、3种视觉运动策略网络架构和3种终身学习算法。通过控制分布偏移和提供100个操作任务,LIBERO能够评估特定类型和复杂知识的迁移。该平台为机器人学习研究提供了全面的工具和数据集,有助于推动该领域的发展。
Ego4d - 大规模多模态视频数据集与基准测试的最新发展
Ego-Exo4DEgo4DGithub多模态数据集开源项目机器学习视频数据集
Ego-Exo4D和Ego4D是全球最大的第一人称和多视角视频机器学习数据集,含有时间同步的视频和丰富的注释。Ego4D数据集包括超过3700小时的注释视频,Ego-Exo4D的V2版本新增了1286.30小时的视频内容,提供数据下载、特征提取和研究的CLI工具和API。详细信息请查阅官方网站和文档。
humanoid-gym - 人形机器人强化学习框架实现零样本仿真到现实转移
GithubHumanoid-Gymlocomotion人形机器人仿真到现实开源项目强化学习
Humanoid-Gym是一个基于Nvidia Isaac Gym的强化学习框架,专门用于训练人形机器人的运动技能。该框架实现了从仿真到现实环境的零样本转移,并整合了Isaac Gym到Mujoco的仿真转换功能,用于验证训练策略的鲁棒性和泛化能力。项目在RobotEra的XBot-S和XBot-L真实机器人上成功实现了零样本仿真到现实转移,并提供了详细的训练指南、配置说明和执行脚本,便于训练和优化人形机器人的运动技能。
goliath - 全身虚拟化身捕捉与重建开源项目
3D建模Codec Avatar StudioGithubGoliath开源项目深度学习计算机视觉
Goliath是一个开源项目,提供全身虚拟化身捕捉和重建技术。项目包含多种捕捉数据集,涵盖可重光照头部和手部、全身和轻装、移动设备等场景。同时提供训练代码,用于生成可重光照的高斯编解码头像、手部模型和基于网格的身体模型。该技术适用于虚拟现实、增强现实和数字人等领域。项目还提供相关的代码实现,包括损失函数、独立模型、可重用模块和工具等。数据集包含相机视图、分割信息、3D关键点、配准和未配准网格,以及光照信息。开发者可通过示例数据和检查点了解数据格式,并使用提供的训练和可视化脚本进行实验。
resources - IvLabs整理的AI和机器人学习资源库
AIGitHubGithubIvLabs学习资源开源项目机器人
IvLabs发起的开源项目,汇集了人工智能和机器人领域的精选学习资源。涵盖计算机视觉、控制理论、深度学习等多个方向的课程材料,同时提供软件技能、会议信息等辅助内容。资源经过筛选,致力于构建全面的知识体系。项目保持更新,接受高质量内容的贡献。
umi-on-legs - 四足机器人操作技能的全身控制框架
GithubUMI on Legs全身控制器四足机器人开源项目机器人操作视觉运动策略
UMI on Legs项目为四足机器人与机械臂结合提供了可扩展的操作技能框架。该框架整合真实人类示范和模拟训练的全身控制器,实现视觉运动策略在四足机器人上的应用。项目涵盖全身控制器模拟训练、实际部署、iPhone里程计应用、UMI真实环境类和ARX5 SDK等组件,为机器人操作研究提供综合解决方案。
VoxPoser - 使用语言模型的3D机器人操作轨迹合成系统
3D价值地图GithubVoxPoser开源项目机器人操作语言模型轨迹合成
VoxPoser是一个3D机器人操作轨迹合成系统,结合大型语言模型和视觉语言模型实现零样本任务执行。该项目在RLBench环境中实现,无需训练数据即可生成复杂操作轨迹。系统通过语言模型程序(LMPs)递归生成代码,分解指令并为子任务组合价值图。VoxPoser包含接口、规划器和控制器等核心组件,用于规划和执行机器人操作任务。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能,包括文生视频、动态画面和形象生成等,帮助用户快速上手,创造专业级内容。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台,用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品,帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型,为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能,满足事务性工作的高频需求,帮助撰稿人节省精力,提高效率,优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号