bert_uncased_L-8_H-256_A-4

24种BERT小模型为计算资源有限的研究环境提供支持

计算资源预训练知识蒸馏开源项目 BERT 模型 Huggingface 模型压缩 Github

此项目提供24种BERT模型，适用于计算资源有限的环境，可通过知识蒸馏进行有效的模型微调，支持低资源机构的研究工作。

bert-base-arabert - AraBERT阿拉伯语言理解预训练模型

AraBERTGithubHuggingface开源项目机器学习模型自然语言处理语料库阿拉伯语言模型

AraBERT是一个阿拉伯语言理解预训练模型系列，提供从基础到大型等多个版本。模型基于超过77GB的阿拉伯语语料库训练，适用于情感分析、命名实体识别和问答等任务，支持主流深度学习框架。

chinese_roberta_L-2_H-128 - 使用多模态预训练优化中文自然语言处理

CLUECorpusSmallGithubHuggingfaceRoBERTa开源项目模型语言模型预训练

该项目包括24种中文RoBERTa模型，使用CLUECorpusSmall数据集进行训练，效果超过较大数据集。模型通过UER-py和TencentPretrain预训练，并支持多模态框架，参数超过十亿。模型可在HuggingFace和UER-py Modelzoo中获取。项目提供详细的训练过程和关键细节，便于结果复现，着重提升中文自然语言处理任务中的性能。

Pretrained-Language-Model - 先进预训练语言模型与优化技术集合

GithubMindSporePyTorchTensorFlow开源项目自然语言处理预训练语言模型

此开源项目汇集了多个先进的预训练语言模型和相关优化技术。包含200B参数中文语言模型PanGu-α、高性能中文NLP模型NEZHA、模型压缩技术TinyBERT和DynaBERT等子项目。这些模型在多项中文NLP任务中表现出色，支持MindSpore、TensorFlow和PyTorch等多种深度学习框架。

BertWithPretrained - 基于PyTorch实现的BERT模型及相关下游任务

BERTGithubPyTorchTransformer中文文本分类开源项目英文文本分类

该项目基于PyTorch实现了BERT模型及其相关下游任务，详细解释了BERT模型和每个任务的原理。项目支持分类、翻译、成对句子分类、多项选择、问答和命名实体识别等任务，涵盖中文和英语的自然语言处理。此外，项目还含有丰富的数据集和预训练模型配置文件。

distilbert-base-multilingual-cased-ner-hrl - DistilBERT微调的10语种命名实体识别模型

DistilBERTGithubHugging FaceHuggingface命名实体识别多语言模型开源项目模型自然语言处理

这是一个基于DistilBERT微调的多语言命名实体识别模型，支持10种高资源语言。模型能够识别位置、组织和人名实体，适用于阿拉伯语、德语、英语等多种语言。它使用各语言的标准数据集训练，可通过Transformers库轻松调用。尽管在多语言NER任务中表现优秀，但在特定领域应用时可能存在局限性。

bertweet-base - BERTweet为英文推文提供预训练大规模语言模型

BERTweetGithubHuggingfaceRoBERTa开源项目推特模型自然语言处理预训练语言模型

BERTweet是针对英文推文预训练的开源大规模语言模型。该模型基于RoBERTa架构,使用8.5亿条英文推文进行训练,包括与COVID-19相关的推文。BERTweet在词性标注、命名实体识别、情感分析和讽刺检测等任务中表现出色。作为处理Twitter数据的基础工具,BERTweet可应用于多种自然语言处理任务,为研究人员提供了宝贵的资源。

camembert-L4 - 精简版法语BERT模型，支持文本分类和语义搜索

CamemBERT-L4GithubHuggingface开源项目文本分类模型特征提取语义搜索语言模型

CamemBERT-L4是CamemBERT模型的精简版本，通过裁剪顶部层次来提高性能。适合在文本分类、抽取式问答、语义搜索等领域进行微调，用于决策的完整句子任务，而非文本生成。支持掩码语言建模（MLM）与文本特征提取，模型参数和大小均有减少，提升了处理效率，同时保持其重要功能。

fast-bert - 快速训练和部署BERT与XLNet文本分类模型的深度学习库

Fast-BertGithub开源项目文本分类深度学习自然语言处理预训练模型

fast-bert是一个深度学习库,用于训练和部署基于BERT和XLNet的文本分类模型。它支持多类和多标签分类,提供数据处理、模型训练、参数调优和部署功能。该库集成了LAMB优化器和学习率查找器,旨在简化最新自然语言处理技术的应用过程。fast-bert适用于各类文本分类任务,能够帮助开发者快速构建高性能模型。

stsb-bert-tiny-onnx - 基于BERT的轻量级文本向量化模型

GithubHuggingfacesentence-transformers开源项目文本嵌入模型模型训练自然语言处理语义相似度

这是一个轻量级的文本向量化模型，基于sentence-transformers框架开发。模型可将文本转换为128维向量表示，主要应用于文本聚类和语义搜索。支持通过sentence-transformers和HuggingFace两种方式调用，提供完整的模型评估数据。

bert-base-arabic - 阿拉伯语BERT基础模型为自然语言处理提供强大支持

BERTGithubHuggingface开源项目机器学习模型自然语言处理阿拉伯语预训练模型

bert-base-arabic是一个在95GB阿拉伯语文本上预训练的BERT基础语言模型。该模型包含OSCAR和维基百科的阿拉伯语数据，支持现代标准阿拉伯语和部分方言。它适用于多种自然语言处理任务，可通过Hugging Face的transformers库轻松调用。这一模型为阿拉伯语NLP研究和应用提供了有力支持，推动了相关领域的发展。

推荐项目

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能，包括文生视频、动态画面和形象生成等，帮助用户快速上手，创造专业级内容。

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台，用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品，帮助用户探索创意灵感。

讯飞文书

讯飞文书依托讯飞星火大模型，为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能，满足事务性工作的高频需求，帮助撰稿人节省精力，提高效率，优化工作与生活。

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务

投诉举报邮箱: service@vectorlightyear.com