Project Icon

avp_teleoperate

Apple Vision Pro远程操控Unitree H1_2人形机器人

该项目实现了Apple Vision Pro远程操控Unitree H1_2人形机器人的功能。通过逆运动学和图像传输技术,实现了双手和双臂的精确控制。项目提供了详细的环境配置指南,涵盖Isaac Gym模拟环境和本地流媒体设置。代码基于TeleVision框架,针对Unitree机器人进行了优化。这一解决方案为人形机器人远程操作开辟了新途径,具有广阔的应用前景。

humanplus - 先进AI系统实现人形机器人影随和模仿人类
GithubHumanPlus人形机器人姿态估计开源项目强化学习模仿学习
HumanPlus是一个开源AI项目,致力于提升人形机器人的影随和模仿能力。项目包含两个主要组件:用于模拟环境强化学习的Humanoid Shadowing Transformer (HST)和用于现实世界模仿学习的Humanoid Imitation Transformer (HIT)。此外,HumanPlus还提供全身姿态估计和相关硬件的代码库,为研究人员和开发者提供完整的技术平台,推动人形机器人与人类互动技术的发展。
AppAgent - 智能代理框架简化智能手机应用操作
AppAgentGPT-4VGithub多模态开源项目探索学习智能手机应用
AppAgent是一种基于LLM的多模态智能代理框架,模仿人类点击和滑动操作来运行智能手机应用。框架通过自主探索或观察人类演示学习新操作,生成知识库以执行复杂任务。无需系统后端访问,适用性广泛。提供详细配置步骤、评估基准和使用案例,支持GPT-4V和通义千问-VL等多种模型。
humanoid-gym - 人形机器人强化学习框架实现零样本仿真到现实转移
GithubHumanoid-Gymlocomotion人形机器人仿真到现实开源项目强化学习
Humanoid-Gym是一个基于Nvidia Isaac Gym的强化学习框架,专门用于训练人形机器人的运动技能。该框架实现了从仿真到现实环境的零样本转移,并整合了Isaac Gym到Mujoco的仿真转换功能,用于验证训练策略的鲁棒性和泛化能力。项目在RobotEra的XBot-S和XBot-L真实机器人上成功实现了零样本仿真到现实转移,并提供了详细的训练指南、配置说明和执行脚本,便于训练和优化人形机器人的运动技能。
ACT - 基于模仿学习的低成本机器人解决方案
Action Chunking TransformerGithub低成本机器人分拣任务开源项目机器人手臂模仿学习
该开源项目适配250美元低成本机器人,采用Action Chunking Transformer (ACT)技术实现模仿学习。项目流程包括数据收集、策略训练和评估,非专业人士只需提供少量远程操作演示即可。使用RTX 3080显卡,30分钟内即可完成训练。项目旨在为机器人学习提供经济实惠的解决方案。
iros20-6d-pose-tracking - 6D姿态跟踪的优化方案,提高机器人操控和视觉领域的精度和效率
6D姿态跟踪GithubRGB-D图像iros20-6d-pose-trackingse(3)-TrackNet开源项目机器人操作
se(3)-TrackNet通过校准合成图像残差,实现视频序列中的6D姿态跟踪,适用领域包括机器人操控和增强现实。其神经网络架构有效减少域迁移,并采用Lie Algebra实现三维定向表示,即使仅使用合成数据训练也能在真实图像中工作。研究表明,在遮挡条件下,该方法提供稳定和精准的姿态估计,计算效率高达90.9Hz。
robotic-transformer-pytorch - RT1机器人控制Transformer模型的PyTorch实现
GithubRT1人工智能开源项目机器人变形金刚深度学习计算机视觉
本项目是Google Robotics团队RT1(Robotic Transformer)的PyTorch实现版本。RT1是一个结合视觉和自然语言处理的机器人控制Transformer模型。该实现包含MaxViT视觉主干网络和RT1核心模型,支持视频输入和文本指令处理。项目提供简洁API,实现了条件采样和跨注意力等功能,可应用于多种机器人控制场景。
OmniControl - 先进的人体动作生成与精确控制技术
GithubOmniControl人体动作生成关节控制开源项目机器学习计算机视觉
OmniControl是一个基于扩散模型的人体动作生成项目,实现了对任意关节在任意时间的精确控制。通过空间引导和真实性引导,该项目能生成高质量、自然的动作序列。OmniControl提供预训练模型、训练代码和评估工具,支持HumanML3D等数据集,为动作生成研究和应用领域提供了灵活有力的解决方案。
talking-head-anime-demo - 从单张图片生成的动漫角色头部动画
GithubTalking Head Anime人工智能动画头部动画开源项目神经网络
该项目包含两个应用程序:手动操控器和动画师。手动操控器通过调整滑块为动漫角色摆姿势;动画师利用网络摄像头捕捉人类头部运动,并同步到动漫角色。项目需要高性能Nvidia GPU和特定的依赖项,支持在Google Colab上运行。用户也可以使用Anaconda重建Python环境,并下载所需模型和数据进行演示。
robot - 多功能手机APP自动化控制工具
APP控制AutoJSGithubJavaScriptuni-app开源项目自动化脚本
Robot是一个开源的手机APP自动化控制工具,支持uni-app、VUE和autojs生态。该项目提供代码加密、自动部署升级和远程脚本执行功能,适用于各类APP。集成流行UI界面,操作简便,支持AutoJS、VUE、color-UI等多种生态系统。项目拥有丰富的开发资源和活跃的社区支持。
visionOS-examples - 提供visionOS开发的示例代码
Apple Vision ProChatAVPGithubHand TrackingLLLMvisionOS开源项目
此项目提供用于Apple Vision Pro的多种示例应用,如本地大语言模型调用、比特币恐惧与贪婪指数的体积视图、实时加密货币价格获取和手势追踪等。通过这些示例,开发者能快速理解visionOS的开发方法和核心概念,提高开发效率,掌握空间计算的新技术和应用场景。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号