Logo

#AI视觉

MVDream: 革命性的多视角扩散模型助力3D生成

2 个月前
Cover of MVDream: 革命性的多视角扩散模型助力3D生成

DIVA: 利用扩散反馈提升CLIP视觉能力的创新方法

2 个月前
Cover of DIVA: 利用扩散反馈提升CLIP视觉能力的创新方法

NXTP: 物体识别的下一代革新 - 将目标检测转化为下一个标记预测

2 个月前
Cover of NXTP: 物体识别的下一代革新 - 将目标检测转化为下一个标记预测

Segment-and-Track-Anything: 一个开源的视频对象分割与跟踪项目

2 个月前
Cover of Segment-and-Track-Anything: 一个开源的视频对象分割与跟踪项目

相关项目

Project Cover
Segment-and-Track-Anything
Segment-and-Track-Anything是一个专注于视频中任意对象分割和追踪的开源项目。该系统集成了SAM模型的关键帧分割能力和DeAOT模型的多目标追踪功能。它支持自动检测新对象、交互式修改、文本提示等多种操作模式,适用于街景分析、增强现实、细胞追踪等领域。项目提供了直观的WebUI界面和灵活的参数设置,使用户能够轻松实现复杂的视频对象分割和追踪任务。
Project Cover
DIVA
DIVA是一种创新方法,利用扩散模型作为视觉助手优化CLIP表示。通过文本到图像扩散模型的生成反馈,DIVA无需配对文本数据即可提升CLIP视觉能力。在MMVP-VLM细粒度视觉评估基准上,DIVA显著提升了CLIP性能,同时保持了其在29个图像分类和检索基准上的强大零样本能力。这为增强视觉语言模型的视觉理解开辟了新途径。
Project Cover
nxtp
nxtp项目开发了一种创新的物体识别方法,将任务转化为下一标记预测。该技术利用语言模型嵌入扩展预测空间,实现开放式标签生成。通过自回归处理和高效采样,nxtp可进行大规模标签预测,如生成前100个最可能的标签。这一方法无需预定义标签集,为计算机视觉领域的物体识别提供了更灵活的解决方案。
Project Cover
MVDream
MVDream是一个开源的多视角扩散模型项目,用于3D内容生成。项目在GitHub上提供两个代码仓库:多视角扩散模型(https://github.com/bytedance/MVDream)和集成SDS技术的3D生成(https://github.com/bytedance/MVDream-threestudio)。由字节跳动研究团队开发,为计算机视觉和3D生成领域提供新的工具和方法。
Project Cover
grounded-segment-anything-colab
grounded-segment-anything-colab是一个基于IDEA-Research项目的图像处理工具,集成了图像分割和编辑功能。该工具支持多种inpainting模型,包括runwayml/stable-diffusion-inpainting和自定义16位模型。项目提供Colab教程,方便用户进行图像分割和编辑操作。此工具为图像处理提供了灵活高效的解决方案。
投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号