MindNLP: 基于MindSpore的高性能自然语言处理框架

Ray

mindnlp

MindNLP简介

MindNLP是一个基于MindSpore深度学习框架开发的开源自然语言处理(NLP)库。它为解决各种NLP任务提供了一个强大的平台,包含了许多常用的NLP方法和模型。MindNLP的目标是帮助研究人员和开发者更方便快捷地构建和训练NLP模型。

MindNLP Logo

主要特性

MindNLP具有以下几个主要特点:

全面的数据处理: MindNLP将多个经典的NLP数据集打包成易用的模块,如Multi30k、SQuAD、CoNLL等,方便用户直接使用。
友好的NLP模型工具集: MindNLP提供了多种可配置的组件,用户可以方便地使用MindNLP自定义模型。
易用的训练引擎: MindNLP简化了MindSpore中复杂的训练流程,提供了Trainer和Evaluator接口,使模型的训练和评估变得简单易行。
兼容Hugging Face生态: MindNLP使用Hugging Face的datasets库作为默认的数据集加载器,支持大量实用的数据集。
支持大语言模型: MindNLP目前支持业界领先的大语言模型(LLMs),包括Llama、GLM、RWKV等。用户可以在"llm"目录中找到相关的预训练、微调和推理示例。
预训练模型支持: MindNLP支持类似Hugging Face transformers的API,包括60多个模型,如BERT、RoBERTa、GPT2、T5等。用户可以通过简单的代码片段轻松使用这些模型:

from mindnlp.transformers import AutoModel

model = AutoModel.from_pretrained('bert-base-cased')

安装指南

从PyPI安装

您可以通过pip安装MindNLP的官方版本:

pip install mindnlp

每日构建版本

您可以从这里下载MindNLP的每日构建wheel包。

从源码安装

要从源码安装MindNLP,请运行以下命令:

pip install git+https://github.com/mindspore-lab/mindnlp.git
# 或者
git clone https://github.com/mindspore-lab/mindnlp.git
cd mindnlp
bash scripts/build_and_reinstall.sh

版本兼容性

MindNLP版本	MindSpore版本	支持的Python版本
master	每日构建	>=3.7.5, <=3.9
0.1.1	>=1.8.1, <=2.0.0	>=3.7.5, <=3.9
0.2.x	>=2.1.0	>=3.8, <=3.9

支持的模型和任务

MindNLP支持多种NLP任务,如语言模型、机器翻译、问答系统、情感分析、序列标注、文本摘要等。您可以通过examples目录访问这些任务的示例。

由于支持的模型数量众多,您可以查看这里获取完整的支持模型列表。

贡献指南

MindNLP是一个开源项目,欢迎任何形式的贡献和反馈。如果您发现任何问题或有新功能的想法,请不要犹豫,通过GitHub Issues与我们联系。

许可证

本项目采用Apache 2.0许可证。

引用

如果您在研究中使用了MindNLP,请考虑引用:

@misc{mindnlp2022,
    title={{MindNLP}: Easy-to-use and high-performance NLP and LLM framework based on MindSpore},
    author={MindNLP Contributors},
    howpublished = {\url{https://github.com/mindlab-ai/mindnlp}},
    year={2022}
}

MindNLP为NLP研究和应用提供了一个强大而灵活的工具箱。无论您是研究人员还是开发者,MindNLP都能帮助您更高效地开发和部署NLP模型。我们期待看到更多基于MindNLP的创新应用和研究成果! 🚀🤖📚

MindNLP Contributors

MindNLP是一个活跃的开源项目,拥有超过100名贡献者。加入我们,一起推动NLP技术的发展吧!