Project Icon

KnowPAT

提升大语言模型在特定领域问答中的知识偏好对齐

KnowPAT是一个创新的大语言模型优化项目,专注于提升模型在特定领域问答中的表现。该项目通过整合领域知识图谱构建偏好集,并设计新的对齐目标来微调模型,使其更好地利用外部知识。KnowPAT提供了完整的训练和推理代码,并在RJUA等数据集上进行了实验验证,为领域特定问答系统的开发提供了有力支持。

QiZhenGPT - 开源中文医学大语言模型
GithubQiZhen医学大模型中文医学语言模型开源项目疾病知识指令药品知识问答长尾关键词
利用QiZhenGPT,结合启真医学知识库,构建高效的中文医学语言模型,提升药品和疾病问答精确度。致力于持续优化该技术,支持医患交流,并助力医疗记录自动生成。
MedicalGPT - 优化医疗GPT模型,提升医疗对话系统的响应与精确性
GithubMedicalGPT医患对话医疗大模型开源项目强化学习微调
MedicalGPT项目采用多阶段方法如增量预训练、精细微调及奖励建模强化学习,优化医疗GPT模型,增强医疗对话与问答系统的性能。模型以人类反馈为基础,通过直接偏好优化和强化学习策略,调整生成对话的质量与人类偏好的契合度,提供科学准确的医疗咨询,项目持续接入先进的医疗语言处理技术,应对医疗领域的需求变化。
pretraining-with-human-feedback - 基于人类偏好预训练的语言模型代码库
GithubHugging Facetoxicity人类偏好多任务开源项目预训练
该项目为根据人类偏好预训练语言模型提供了一套基于Hugging Face Transformers和wandb的工具。项目实现了五种预训练目标,通过对训练数据注释并使用这些目标函数提升模型性能,包括毒性检测和隐私信息识别等任务。项目还提供详细的配置文件和评估方式指导。
auto-j - 开源大语言模型评估工具
Auto-JGithub大语言模型对齐评估开源开源项目生成式评判
Auto-J是一款开源的大语言模型评估工具,可评估模型与人类偏好的对齐程度。该工具覆盖58个真实场景,支持成对响应比较和单一响应评估,并提供详细的自然语言评论。Auto-J具有通用性强、灵活性高、可解释性好等特点,在多项评估任务中表现优异,为大语言模型的对齐研究提供支持。
Alpaca-CoT - 一站式AI指令调谐与语言处理平台
Alpaca-CoTGithub参数效率大型语言模型开源项目指令调优平台统一界面
Alpaca-CoT,一款集成指令收集、参数效率优化和语言处理的AI工具,提供统一与高效的用户界面, 适用于处理复杂的语言模型任务,增强操作的精确度及效能。
Easy-RAG - 构建高效RAG系统 集成多功能知识库和先进对话能力
Easy-RAGGithub向量数据库大模型聊天开源项目知识图谱知识库
Easy-RAG是一个功能全面的检索增强生成(RAG)系统,支持多种文件格式的知识库管理。系统整合了Chroma、FAISS等向量数据库,并采用rerank技术提高信息检索效率。它具备纯大模型多轮对话和基于知识库的问答能力,适合学习、使用和自主扩展。Easy-RAG还支持音频视频的语音转文本功能,为构建智能对话系统提供了全面的解决方案。
LongQLoRA - 大语言模型上下文长度高效扩展的创新方法
GithubLongQLoRA上下文长度扩展低资源训练大语言模型开源项目性能评估
LongQLoRA是一种扩展大语言模型上下文长度的方法,可在单个32GB V100 GPU上将LLaMA2模型的上下文长度从4096扩展到8192。该方法在PG19和Proof-pile数据集上表现优异,仅需1000步微调即可达到接近MPT-7B-8K的性能。项目还提供了预训练数据集、指令微调数据集以及扩展上下文长度的模型。
Advanced_RAG - 深入探索RAG和Langchain框架在语言理解中的应用
Advanced_RAGGithubLLMsLangchainMulti Query RetrieverSelf-Reflection-RAG开源项目
该项目通过Python笔记本展示了RAG的高级技术,旨在优化大型语言模型(LLMs)的知识丰富度和上下文感知能力。从基础流程到多查询检索、自我反思、和自适应代理等高级架构,全面覆盖了核心组件及其工作方式。项目提供了构建RAG应用的详细指南,展示了如何通过Langchain框架提升文本生成的准确性和信息丰富度。内容包括查询转换、数据源路由和向量数据库索引等关键技术,为LLM应用提供坚实支持。
PiSSA - 高效微调大语言模型的创新方法
GithubPiSSA低秩适应参数高效微调大语言模型奇异值分解开源项目
PiSSA是一种创新的参数高效微调方法,通过优化关键奇异值和向量来增强大语言模型性能。相较于LoRA,PiSSA展现出更快的收敛速度和更优的效果。在多个基准测试中,PiSSA的表现全面超越LoRA。这种方法不仅保留了LoRA的参数效率和量化兼容性优势,还大幅降低了4位量化误差。PiSSA初始化迅速,易于从LoRA转换。在多种模型和任务中,PiSSA均表现出色,为大语言模型的高效微调提供了新的可能性。
PairRM - LLM质量提升的Pairwise奖励模型
GithubHuggingfaceLLM评估Pairwise Reward ModelRLHF方法开源项目模型相对质量高效解码
Pairwise Reward Model通过比较一对候选输出对每个候选分配质量评分。该模型可用于有效评估LLM质量,通过对候选输出重新排序,增强LLM输出效果,并支持RLHF方法的指令调整。模型基于microsoft/deberta-v3-large,利用多样化的人类偏好数据集进行训练,性能接近GPT-4,在有限资源下实现高效对齐和质量提升。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号