unbiased-toxic-roberta

RoBERTa模型识别多语言有毒评论并减少偏见

模型评估 Huggingface 模型 Detoxify 机器学习有毒评论分类 Github 开源项目自然语言处理

该项目开发了基于RoBERTa的多语言模型,用于检测互联网上的有毒评论。模型在Jigsaw三个挑战数据集上训练,可识别威胁、侮辱和仇恨言论等多种有毒内容。它支持多种语言,易于使用,适用于研究和内容审核。项目还探讨了模型的局限性和伦理问题,努力减少对特定群体的意外偏见。

文档

detoxify - 基于Pytorch Lightning和Transformers的多语言有害评论分类模型

DetoxifyGithubJigsawMultilingualPytorch LightningToxic Comment ClassificationTransformersUnintended Bias in Toxicity Classification开源项目

Detoxify项目利用Pytorch Lightning和Transformers构建模型，识别和分类包含威胁、辱骂和身份攻击的有害评论。这些模型支持多语言操作，致力于减少无意中的偏见。项目在多次Jigsaw挑战赛中表现出色，提供高效的有害内容检测方案，适合用于研究和内容审核工作，帮助更快速地标记有害内容和提高用户体验。

twitter-roberta-large-hate-latest - 增强的多类别仇恨言论检测模型

GithubHuggingfaceRoBERTaSuperTweetEval仇恨言论检测开源项目推特文本分类模型

此RoBERTa-large模型基于154M推文数据进行训练，并在SuperTweetEval数据集上进行微调，以实现仇恨言论的多类别分类检测。模型能够准确识别多种仇恨类型，包括性别、种族和宗教等，为社交媒体内容管理提供支持。

twitter-roberta-large-2022-154m - 训练于154M推文的RoBERTa-large模型（2022年数据）及其应用

GithubHuggingfaceRoBERTa-large开源项目推特掩码语言模型模型特征提取自然语言处理

本项目提供了一种经过2022年12月底前154M条推文训练的RoBERTa-large模型，主要用于推文数据的理解和解析。它通过Twitter Academic API获取并过滤推文，实现了高级文本预处理、掩码语言模型和特征提取的应用示例。用户可借助标准Transformers接口进行推文分析及嵌入提取，同时适用于对比在不同时间段训练的模型的预测结果和困惑度得分，为研究人员提供更深入分析推特时间序列数据的工具。

robust-sentiment-analysis - 使用distilBERT的情感分析模型，实现对社交媒体和客户反馈的精确分析

GithubHuggingfacedistilBERT合成数据客户反馈开源项目情感分析模型社交媒体分析

模型基于distilBERT结构并利用合成数据训练，可精确解析社交媒体、客户反馈和产品评价的情感变化。适用于品牌监测、市场研究和客户服务优化，支持五个情感分类，准确率达95%。帮助企业有效识别用户情绪动向。

chinese-roberta-wwm-ext-large - 中文自然语言处理的全词掩码预训练模型

BERTGithubHuggingface中文自然语言处理全词掩码开源项目模型知识蒸馏预训练模型

中文BERT全词掩码预训练模型加速中文自然语言处理，提升精准语义理解。基于Google BERT并结合全词掩码策略，其在文本分类、情感分析以及问答系统等多种NLP应用中表现优异，是探索中文语言理解的有力工具。

roberta-base-zeroshot-v2.0-c - 商用优化的零样本文本分类工具

GithubHugging FaceHuggingfacezeroshot分类商业友好数据开源项目模型模型训练自然语言推理

该系列模型专为Hugging Face平台优化，支持在GPU和CPU上进行零样本分类，无需预先训练数据。最近的改进包括基于商业友好的数据集训练，能满足严苛的许可条件。roberta和deberta系列以合理的准确性和速度满足不同需求，可用于多种语言和大范围文本输入，非常适合全球多样化的应用场景。最新的模型更新可在Zeroshot Classifier Collection中查阅，确保多种使用环境下的合规性。

pretraining-with-human-feedback - 基于人类偏好预训练的语言模型代码库

GithubHugging Facetoxicity人类偏好多任务开源项目预训练

该项目为根据人类偏好预训练语言模型提供了一套基于Hugging Face Transformers和wandb的工具。项目实现了五种预训练目标，通过对训练数据注释并使用这些目标函数提升模型性能，包括毒性检测和隐私信息识别等任务。项目还提供详细的配置文件和评估方式指导。

SecRoBERTa - 改善网络安全任务的预训练语言模型

GithubHuggingfaceSecRoBERTa事件信息提取威胁情报开源项目模型网络安全预训练模型

SecRoBERTa是一款专为网络安全文本设计的预训练语言模型，提升了命名实体识别和文本分类等任务的性能。该模型通过APTnotes、Stucco-Data和CASIE等数据集进行训练，优化了词汇处理能力，从而更有效地应用于网络安全领域。

RobBERT - 为荷兰语自然语言处理提供强大基础的预训练模型

BERTGithubRobBERT开源项目自然语言处理荷兰语模型预训练

RobBERT是基于RoBERTa架构的荷兰语预训练语言模型,在多项荷兰语自然语言处理任务中展现出卓越性能。该模型在39GB荷兰语语料库上进行预训练,可用于情感分析、命名实体识别和词性标注等任务,尤其在小规模数据集上表现突出。RobBERT为荷兰语自然语言处理的研究与应用奠定了坚实基础。

hatespeechdata - 多语言仇恨言论数据集汇总与研究资源

Github仇恨言论在线辱骂多语言开源项目数据集社交媒体

该项目汇集了涵盖多种语言的仇恨言论、在线辱骂和攻击性语言数据集。收录内容包括来自不同平台的文本、图像和音频数据。项目旨在为自然语言处理系统提供训练资源，以提升有害内容检测能力。此外，项目还提供关键词列表和贡献指南，为研究人员和开发者改进在线内容审核和仇恨言论检测技术提供支持。

推荐项目

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

吐司

探索Tensor.Art平台的独特AI模型，免费访问各种图像生成与AI训练工具，从Stable Diffusion等基础模型开始，轻松实现创新图像生成。体验前沿的AI技术，推动个人和企业的创新发展。

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器，它将改变您观看视频的方式！SubCat结合了先进的人工智能技术，为您提供即时视频字幕翻译，无论是本地视频还是网络流媒体，让您轻松享受各种语言的内容。

美间AI

美间AI创意设计平台，利用前沿AI技术，为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图，再到文案生成，美间让创意设计更简单、更高效。

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务

投诉举报邮箱: service@vectorlightyear.com