Project Icon

h2o-danube3-500m-base

500M参数的大规模语言模型,支持离线文本生成

由H2O.ai推出的h2o-danube3-500m模型,是一个大规模语言模型,采用Llama 2架构调整及500M参数设计。模型支持原生离线运行,尤其适用于手机设备,并集成Mistral分词器,拥有32,000词汇量及8,192长度的上下文生成能力。在支持transformers库的环境中,模型可在GPU设备上有效运行,并且支持量化和多GPU分片处理。重要提醒用户在使用模型生成的内容时保持审慎态度并自行承担责任。

gemma-2B-10M - Gemma 2B模型实现1000万token上下文处理 仅需32GB内存
Gemma 2BGithub内存优化局部注意力开源项目推理优化长上下文
gemma-2B-10M项目采用递归局部注意力机制,在32GB内存限制下实现了处理1000万token上下文的能力。该项目为Gemma 2B模型提供CUDA优化的推理功能,显著提升了处理效率。项目设计简洁易用,便于开发者快速应用。虽然目前处于早期阶段,但在长文本处理领域展现出巨大潜力,有望推动相关技术的进步。
LLM2Vec-Mistral-7B-Instruct-v2-mntp - 将大型语言模型转变为高效文本编码器的简单方法
GithubHuggingfaceLLM2Vec开源项目文本编码模型深度学习自然语言处理语义相似度
LLM2Vec-Mistral-7B-Instruct-v2-mntp项目提供了一种将解码器型大语言模型转换为文本编码器的方法。该方法包括启用双向注意力、掩码下一个词预测和无监督对比学习三个步骤。经过转换的模型可生成高质量文本嵌入,适用于信息检索、文本分类和语义相似度等自然语言处理任务,并可通过微调进一步提升性能。
Llama-2-7b-chat-hf - 开源对话模型 强大性能与安全性兼备
GithubHuggingfaceLlama 2Meta人工智能大型语言模型开源项目模型自然语言处理
Llama-2-7b-chat-hf是Meta开发的大型语言模型,针对对话场景进行了优化。该模型在多数基准测试中超越了其他开源聊天模型,其有用性和安全性与部分知名封闭源模型相当。模型基于transformer架构,通过监督微调和人类反馈强化学习提升了帮助性和安全性。Llama-2-7b-chat-hf支持多种商业和研究应用,适用于助手式聊天等任务。使用时需按特定格式输入以获得最佳性能。
multilingual-e5-large - 大规模多语言文本编码模型,适用于多种NLP任务
GithubHuggingfacemultilingual-e5-large多语言支持开源项目机器学习模型自然语言处理语言模型
multilingual-e5-large是一个支持100多种语言的大规模文本编码模型。该模型在文本分类、检索、聚类和语义相似度等多项自然语言处理任务中表现优异。基于Transformer架构,它能够生成高质量的多语言文本嵌入,适用于各种跨语言NLP应用。在MTEB基准测试中,该模型展现了出色的多语言和多任务处理能力。
llama2_xs_460M_experimental - 了解LLaMA与LLaMa 2的小型实验版本及其精简模型参数
GithubHuggingfaceLLaMa 2MMLUTokenization大模型开源开源项目模型
项目呈现Meta AI的LLaMA与LLaMa 2开源重现版本,并采用缩小的模型参数:llama1_s为1.8B,llama2_xs为460M。训练基于RedPajama数据集,使用GPT2Tokenizer分词,支持通过HuggingFace Transformers库直接加载以及文本生成。模型在MMLU任务中表现评估,其中llama2_xs_460M在0-shot和5-shot中分别得21.13和26.39的分数。
DeepSeek-MoE - 创新MoE架构打造高效大规模语言模型
DeepSeekMoEGithubMoE架构大语言模型开源模型开源项目模型评估
DeepSeek-MoE项目开发了创新的混合专家架构语言模型,采用细粒度专家分割和共享专家隔离策略。该16.4B参数模型仅使用40%计算量就达到DeepSeek 7B和LLaMA2 7B的性能水平。模型可在单个40GB内存GPU上直接部署运行,无需量化,为学术和商业研究提供了高效便捷的工具。
nllb-200-distilled-600M - NLLB-200:支持200种语言互译的开源机器翻译模型
Flores-200GithubHuggingfaceNLLB-200低资源语言多语言开源项目机器翻译模型
NLLB-200-distilled-600M是一个开源机器翻译模型,支持200种语言之间的互译,特别关注低资源语言。该模型采用先进算法和大规模数据集训练,在BLEU等指标上表现优异。主要用于研究目的,适用于通用领域文本,最大输入长度为512个token。需注意,该模型不适合生产环境,存在潜在的误译风险,使用时应考虑相关伦理因素。
Llama3-OpenBioLLM-70B - 生物医学领域的开源大型语言模型
GithubHuggingfaceOpenBioLLM-70B临床医疗领域开源项目模型模型训练生物医学
由Saama AI Labs开发的OpenBioLLM-70B是专为生物医学设计的开源语言模型。其在高质量数据集上进行微调,以70亿参数的性能在生物医学基准测试中表现优异,甚至超过了更大规模的模型。该模型基于Meta-Llama-3-70B-Instruct等架构,通过多样化的医疗数据集优化生物医学应用,为全球研究人员和开发者在医疗和生命科学领域提供支持。
MINI_LLM - 完整中文大语言模型训练流程实践
DPOGithubMini-llm大模型开源项目微调预训练
MINI_LLM项目展示了完整的中文大语言模型训练流程,涵盖预训练、SFT指令微调和DPO优化阶段。该项目基于QWEN模型,利用多种数据集训练出1.4B参数规模的模型。项目详细介绍了数据处理方法、提供训练脚本,并包含多GPU训练指南,为中文大语言模型开发提供了实用参考。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号