RAGFoundry

开源框架增强大语言模型检索能力

RAG Foundry 检索增强生成大语言模型数据集创建模型微调 Github 开源项目

RAG Foundry是一个开源框架,通过RAG增强数据集微调模型来提升大语言模型的外部信息检索能力。该框架包含数据集创建、模型训练、推理和评估四个模块,支持快速原型设计和RAG实验。其模块化设计和可定制工作流程,有助于研究人员和开发者高效改进LLM的检索增强生成能力。

Github

论文

介绍相关项目

ChainForge - 开源视觉编程环境，用于测试和评估大型语言模型的提示效果

ChainForgeGithubLLMPrompt Engineering开源开源项目数据可视化

ChainForge是一个开源视觉编程环境，适用于大型语言模型（LLMs）。它支持同时查询多个模型、对比不同提示和模型设置下的响应质量，提供评估指标设置与结果可视化，助力用户选择最适合的提示和模型。适合于快速探索提示及评估聊天响应。目前处于开放beta阶段，支持多家知名模型提供商，包括OpenAI、HuggingFace及Google PaLM2等。

fondant - 旨在协同构建和共享数据集的开源数据框架

FondantGithub共享操作开源项目数据处理数据框架数据集构建

Fondant是一个开源数据框架，旨在协同构建和共享数据集。它允许用户无需移动源数据即可进行数据初始化、处理和加载，支持可插拔的工作流、自定义组件以及版本追踪与数据浏览。Fondant适用于跨云端环境（如Google Cloud的Vertex和AWS的Sagemaker），使数据处理简单、可扩展，是生产环境中处理和共享数据集的理想选择。

StreamRAG - 为ChatGPT设计的视频搜索代理

APIChatGPTGithubStreamRAGVideoDB开源项目视频搜索

StreamRAG是一个为ChatGPT设计的视频搜索代理，帮助开发者上传、管理视频库，并实现实时视频搜索和回复。该平台支持在ChatGPT商店发布搜索视频集，提供视频关键见解和摘要。适用于各种视频内容分析和共享，增强视频资料的可访问性和应用性。

LLMBox - 全面的大型语言模型训练与评估框架

GithubLLMBox大语言模型开源项目模型评估训练管道高效推理

LLMBox是一个综合性大型语言模型(LLM)库，集成了统一的训练流程和全面的模型评估功能。该框架旨在提供LLM训练和应用的完整解决方案，其设计注重实用性，在训练和使用过程中体现出高度的灵活性和效率。LLMBox支持多样化的训练策略和数据集，提供丰富的评估方法，并具备高效的推理和量化能力，为LLM的研究和开发提供了强大支持。

RoleLLM-public - 评估与提升大语言模型角色扮演能力的框架

GithubRoleLLM基准测试大语言模型开源项目微调角色扮演

RoleLLM框架旨在评估和增强大语言模型的角色扮演能力。该框架包含RoleBench数据集、Context-Instruct知识提取方法、RoleGPT风格模仿技术和RoCIT微调策略。通过这些组件，RoleLLM显著提升了开源模型的角色扮演表现，在某些方面达到了与GPT-4相当的水平。这一框架为大语言模型在角色扮演任务中的应用提供了新的研究方向。

synthesizer - 定制数据生成及RAG集成，提升LLM训练效率

Custom Data CreationGithubLLMRAGSciPhiSynthesizer[ΨΦ]开源项目

Synthesizer是一个通用的LLM框架，支持通过LLMs生成定制数据集，快速进行RAG集成，且设置简便。它内置的RAG供应商接口支持与Agent Search API无缝集成，适用于LLM训练和数据增强。用户可访问官方文档获取详细信息、教程和API参考，并在Discord社区中讨论。

haystack - 用于构建端到端LLM应用程序的高级框架，支持广泛的NLP功能

GithubHaystackLLM开源项目文档检索热门自然语言问答语义搜索

Haystack是一个综合性的LLM框架，能够实现从文档检索到问题回答的多种功能。用户可以灵活选择使用OpenAI、Cohere、Hugging Face等提供的模型，或是自定义部署在各大平台的模型。该框架支持包括语义搜索、答案生成和大规模文档处理等广泛的NLP任务，同时还支持使用现成模型或对其进行微调，基于用户反馈持续优化模型性能。适用于企业级应用开发，帮助用户解决复杂的NLP问题。

raft - 可复用CUDA函数库加速向量搜索与机器学习

CUDAGPU加速GithubRAFT向量搜索开源项目机器学习

RAFT是一个CUDA加速的C++头文件库，为机器学习和信息检索提供基础算法和原语。它实现了先进的向量相似度搜索方法，包括暴力搜索、IVF-Flat、IVF-PQ和CAGRA。RAFT还提供可重用原语，用于构建涵盖数据生成、模型评估、分类回归、聚类等领域的机器学习算法。通过跨项目复用和集中核心计算，RAFT加速了算法开发，并使未来优化能广泛应用于各种算法。

llm-app - 企业动态RAG，多数据源同步

AI应用GPTGithubLLM AppPathwayRAG开源项目

Pathway的LLM应用让高精度RAG AI应用快速上线，使用最新数据源。支持文件系统、Google Drive、Sharepoint、S3、Kafka、PostgreSQL等多种数据源的连接和同步，无需额外基础设施。提供多种模板，扩展至数百万页文档，满足不同需求。

awesome-llm-apps - 精选RAG与AI代理的多功能LLM应用

AI应用AnthropicGithubLLMOpenAIRAG开源项目

了解一系列使用OpenAI、Anthropic、Google等模型以及本地LLaMA模型构建的LLM应用，涵盖从代码库、电子邮件到投资、旅行等各个领域。这些应用通过详细的文档和开源生态系统，推动AI在多个领域的创新和发展。

相关项目

推荐项目

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

吐司

探索Tensor.Art平台的独特AI模型，免费访问各种图像生成与AI训练工具，从Stable Diffusion等基础模型开始，轻松实现创新图像生成。体验前沿的AI技术，推动个人和企业的创新发展。

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器，它将改变您观看视频的方式！SubCat结合了先进的人工智能技术，为您提供即时视频字幕翻译，无论是本地视频还是网络流媒体，让您轻松享受各种语言的内容。

美间AI

美间AI创意设计平台，利用前沿AI技术，为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图，再到文案生成，美间让创意设计更简单、更高效。

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务

投诉举报邮箱: service@vectorlightyear.com