相关项目
wink-nlp-utils
wink-nlp-utils是一个轻量级自然语言处理工具集，提供36多个实用函数。支持姓名提取、语料库生成、句子分割、分词和停用词移除等功能。适用于语义搜索和文本分类等任务的预处理，为开发人员提供简洁API。该项目是wink开源家族的一员，专注于文本预处理和分析，在npm上可用，具有完整的文档和测试覆盖率。支持Node.js环境。
xlm-roberta_punctuation_fullstop_truecase
该模型基于XLM-RoBERTa架构，能够在47种语言中自动恢复标点符号、调整大小写和检测句子边界。通过创新的神经网络设计，无需语言特定路径即可处理多种语言文本。模型支持批量处理，可通过punctuators包或直接使用ONNX和SentencePiece模型进行部署，为多语言文本处理提供了灵活高效的解决方案。