detoxify

基于Pytorch Lightning和Transformers的多语言有害评论分类模型

Detoxify Pytorch Lightning Transformers Toxic Comment Classification Jigsaw Unintended Bias in Toxicity Classification Multilingual Github 开源项目

Detoxify项目利用Pytorch Lightning和Transformers构建模型，识别和分类包含威胁、辱骂和身份攻击的有害评论。这些模型支持多语言操作，致力于减少无意中的偏见。项目在多次Jigsaw挑战赛中表现出色，提供高效的有害内容检测方案，适合用于研究和内容审核工作，帮助更快速地标记有害内容和提高用户体验。

Github

Huggingface

介绍相关项目

awesome-huggingface - 综合NLP开源项目与Hugging Face集成工具

GithubHugging FaceNLP工具包transformers开源项目机器学习自然语言处理

该项目列出了多个优秀的开源项目和应用，均与Hugging Face库集成，为各类NLP任务提供有效的解决方案。内容涵盖官方库教程、NLP工具包、文本表示、推理引擎、模型扩展、模型压缩、对抗攻击、风格转换、情感分析、语法纠正、翻译、知识与实体、语音处理、多模态学习、强化学习、问答系统、推荐系统、评估工具、神经搜索、云支持和硬件支持等多个领域。此项目能够帮助用户找到并使用适合的工具和库，提升自然语言处理任务的效率和效果。

pythia-1b-deduped - Pythia模型家族为大规模语言模型的可解释性研究提供了全面支持

EleutherAIGithubHuggingfacePythia开源项目数据集模型科研语言模型

Pythia Scaling Suite由EleutherAI开发，专注于大规模语言模型可解释性研究，包含16个模型，这些模型使用相同的数据集并提供154个中间检查点，托管于Hugging Face。尽管未专门针对下游性能优化，Pythia模型的表现仍可与OPT和GPT-Neo套件媲美甚至超越，适用于科研和实验用途，并支持进一步微调。

distilbert-base-multilingual-cased-sentiments-student - 基于DistilBERT的多语言情感分析模型

DistilBERTGithubHuggingface多语言模型开源项目情感分析文本分类模型零样本蒸馏

这是一个基于DistilBERT的多语言情感分析模型，通过零样本分类管道在多语言情感数据集上进行蒸馏。模型支持英语、阿拉伯语、德语等多种语言，可用于情感分类任务。采用零样本蒸馏技术，在保持较高准确率的同时，有效降低了模型规模。该模型为多语言情感分析提供了一个高效且灵活的解决方案。

modelscan - 开源AI模型安全扫描工具助力高效检测风险

GithubModelScan安全扫描序列化攻击开源项目机器学习模型

ModelScan是Protect AI开发的开源AI模型安全扫描工具,支持H5、Pickle和SavedModel等多种格式。它可快速识别PyTorch、TensorFlow、Keras等框架中的模型安全风险,有效防范模型序列化攻击。ModelScan易于集成到机器学习流程中,为AI模型全生命周期提供安全保障,保护数据和系统安全。

electra-large-generator - 基于判别器架构的高效预训练语言模型

ELECTRAGithubHuggingface开源项目文本编码模型神经网络自监督学习语言预训练

ELECTRA是一种自监督语言表示学习方法，采用判别器替代传统生成器架构进行预训练。该模型可在单GPU环境运行，通过区分真实和生成的输入标记进行训练。在SQuAD 2.0等基准测试中取得了显著成果，支持分类、问答和序列标注等下游任务的微调。

llama3-llava-next-8b-tokenizer - Transformers框架模型文档标准化指南

GithubHuggingfacetransformers开源项目机器学习模型模型训练模型评估环境影响

Transformers框架模型文档模板提供标准化的模型说明结构，涵盖模型详情、应用场景、风险评估、训练参数、性能评估等核心内容。该模板系统性地记录从技术架构到环境影响的关键信息，便于开发者规范化管理和共享模型资料。

twitter-xlm-roberta-base-sentiment-multilingual - XLM-RoBERTa模型在多语言推特情感分析中的应用

GithubHuggingfaceXLM-RoBERTasentiment analysistweetnlp多语言开源项目文本分类模型

本项目是基于cardiffnlp/twitter-xlm-roberta-base模型针对多语言推特情感分析进行的微调。模型在cardiffnlp/tweet_sentiment_multilingual数据集上训练，通过tweetnlp库实现。测试结果显示，模型在F1分数和准确率方面均达到约69%的性能。研究人员和开发者可使用简单的Python代码调用此模型，为多语言社交媒体内容分析提供了实用的解决方案。

hatespeechdata - 多语言仇恨言论数据集汇总与研究资源

Github仇恨言论在线辱骂多语言开源项目数据集社交媒体

该项目汇集了涵盖多种语言的仇恨言论、在线辱骂和攻击性语言数据集。收录内容包括来自不同平台的文本、图像和音频数据。项目旨在为自然语言处理系统提供训练资源，以提升有害内容检测能力。此外，项目还提供关键词列表和贡献指南，为研究人员和开发者改进在线内容审核和仇恨言论检测技术提供支持。

breast_cancer_classifier - 深度学习模型助力乳腺癌筛查增强放射科医师诊断能力

Deep Neural NetworksGithubPyTorchbreast cancermammographyradiologists开源项目

该开源项目提供基于深度学习的预训练模型，能够提升乳腺癌筛查的准确性。项目包含仅图像和图像+热图两种模型，适用于标准视图的乳腺X光检查，支持GPU加速，使用Python和PyTorch实现，提供详细的示例数据和预测结果。

swift-coreml-transformers - 实现GPT-2和BERT等Transformer模型

CoreMLGithubSwiftTransformers开源项目模型转换自然语言处理

swift-coreml-transformers项目提供了GPT-2、DistilGPT-2、BERT和DistilBERT等Transformer模型的Swift Core ML实现。项目包括预训练模型、转换脚本、分词器实现和演示应用。开发者可在iOS设备上部署这些自然语言处理模型,实现文本生成和问答功能。该开源项目展示了如何将先进NLP技术应用于移动设备。

相关项目

项目侧边栏1

项目侧边栏2

推荐项目

Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型，免费访问各种图像生成与AI训练工具，从Stable Diffusion等基础模型开始，轻松实现创新图像生成。体验前沿的AI技术，推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器，它将改变您观看视频的方式！SubCat结合了先进的人工智能技术，为您提供即时视频字幕翻译，无论是本地视频还是网络流媒体，让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台，利用前沿AI技术，为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图，再到文案生成，美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务

投诉举报邮箱: service@vectorlightyear.com

@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号