Project Icon

slimsam-77-uniform

Transformers.js中的ONNX模型兼容性和遮罩生成

该开源项目利用ONNX权重,使Transformers.js库兼容,实现AI模型在网页上的遮罩生成。允许通过JavaScript轻松进行图像处理,支持从模型中加载图像和处理器,使用2D定位点生成遮罩并计算IoU分数。项目提供在线演示,方便用户体验实时图像分割,建议将模型转换为ONNX格式以便于网页使用。

clip-vit-base-patch16 - CLIP-ViT:基于Transformers的零样本图像分类模型
GithubHuggingfaceONNXTransformers.js图像分类开源项目文本嵌入模型视觉嵌入
clip-vit-base-patch16是OpenAI CLIP模型的一个变种,专注于零样本图像分类任务。这个模型使用ONNX格式的权重,可与Transformers.js库无缝集成,方便在Web环境中应用。它不仅提供了易用的pipeline API用于图像分类,还支持独立的文本和图像嵌入计算功能。该模型在处理各种图像分析和跨模态任务时,能够在性能和计算效率之间保持良好平衡。
all-MiniLM-L6-v2 - 轻量级句子嵌入模型助力Web环境文本分析
GithubHuggingfaceONNX权重Transformers.js句向量嵌入计算开源项目模型特征提取
all-MiniLM-L6-v2是一款基于Transformers.js的轻量级句子嵌入模型。它使用ONNX权重,与Transformers.js完全兼容,适用于Web环境的文本分析。开发者可通过简洁的JavaScript代码创建特征提取管道,快速生成多个句子的标准化嵌入向量。该模型为自然语言处理提供了高效解决方案,尤其适合需要在浏览器中进行文本分析的应用场景。
whisper-tiny.en - 支持时间戳转录的轻量级英语语音识别模型
GithubHuggingfaceONNXTransformers.jsWhisper开源项目时间戳模型自动语音识别
基于transformers.js开发的轻量级英语语音识别模型,集成ONNX格式权重实现Web端部署。模型支持基础文本转录、时间戳转录及单词级时间戳标记等功能,通过JavaScript可快速实现音频转文本识别。
onnx - 跨平台开源机器学习模型交换格式
GithubGlobal Corporation人工智能企业安全开源项目社交媒体跨平台应用
ONNX是一种开放的机器学习模型表示格式,支持跨框架模型互操作。它定义了统一的模型表示方式,实现不同AI框架间的模型转换。ONNX简化模型部署过程,提升AI应用效率。作为行业标准,ONNX促进AI生态系统发展,为开发者和企业带来更多可能性。
Awesome-MIM - 掩码图像建模在自监督表示学习中的应用与发展
GithubMasked Image ModelingTransformer开源项目深度学习自监督学习计算机视觉
该项目汇总了掩码图像建模(MIM)及相关的自监督学习方法。涵盖了从2008年以来的主要自监督学习研究,并展示了其在自然语言处理和计算机视觉领域的发展历程和关键节点。所有内容按时间顺序排列并定期更新,包括相关论文、代码和框架的详细信息,旨在帮助研究者深入理解和应用MIM方法。欢迎贡献相关文献或修正建议。
smol-vision - 前沿视觉模型优化与定制的实用技巧集锦
GithubONNX量化Smol Vision开源项目模型微调知识蒸馏视觉模型优化
smol-vision项目汇集了多种视觉模型优化技术,包括量化、ONNX转换、模型微调和知识蒸馏。项目提供了实用示例,展示如何使用Optimum优化目标检测模型、微调PaliGemma和Florence-2视觉语言模型,以及通过torch.compile加速基础模型。这些方法旨在帮助开发者提高模型性能、缩小规模和加快推理速度,使模型更好地适应各种硬件环境。
machine-learning-for-the-web - 交互式机器学习在Web应用中的实践教程
GithubRunwayMLTensorFlow.jsml5.js开源项目机器学习神经网络
项目为Web开发者和创意工作者提供了机器学习在浏览器环境中的应用指南。内容覆盖预训练模型运行、自定义数据模型创建等全流程,聚焦机器学习在创意项目中的实际应用。涉及图像/声音分类、人脸/姿势识别、多媒体生成等主题,运用迁移学习、卷积神经网络等技术。通过实践,参与者可掌握常见机器学习模型的工作原理、训练方法及其在创意领域的应用潜力。
mask2former-swin-small-coco-instance - 基于Transformer架构的统一图像分割框架
GithubHuggingfaceMask2Former图像分割开源项目机器视觉模型模型训练语义识别
Mask2Former是一个基于COCO数据集的图像分割模型,采用Swin-Small作为基础架构。通过统一的掩码预测方法实现实例、语义和全景分割功能。该模型创新性地结合多尺度可变形注意力机制和掩码注意力技术,优化了计算效率。采用子采样点损失计算策略,使训练过程更加高效。
virtual-background - 浏览器内实时视频流虚拟背景替换,支持多个机器学习模型
BodyPixGithubML KitMediaPipeVirtual BackgroundWebAssembly开源项目
该项目展示了如何在浏览器实时视频流中,添加虚拟背景并切换三种预训练机器学习模型,包括BodyPix、MediaPipe Meet Segmentation和ML Kit Selfie Segmentation。用户可以对桌面和移动设备上的不同模型性能进行比较。此项目提供了详细的实现细节、性能分析及改进建议。
llm.js - JavaScript实现浏览器直接运行大语言模型
GithubJavaScriptLLM.jsWebAssembly大语言模型开源项目浏览器推理
llm.js是一个JavaScript库,实现了在浏览器中直接运行大语言模型。该项目支持TinyLLaMA、GPT-2和Qwen等多种模型,利用WebAssembly技术在浏览器端进行高效推理,可在智能手机等设备上运行。llm.js提供结构化响应、Web Worker支持和模型缓存等功能,方便开发者将AI能力整合到Web应用中。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能,包括文生视频、动态画面和形象生成等,帮助用户快速上手,创造专业级内容。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台,用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品,帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型,为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能,满足事务性工作的高频需求,帮助撰稿人节省精力,提高效率,优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号