Logo
Project Icon

LLM_Web_search

增强本地LLM的网页搜索功能，结合DuckDuckGo和多种关键词提取技术

LLM_Web_searchtext-generation-webuiOkapi BM25SPLADEDuckDuckGoGithub开源项目

本项目通过特定指令增强本地LLM的网页搜索能力，使用duckduckgo-search进行搜索，并使用LangChain的上下文压缩和Okapi BM25（或SPLADE）技术提取相关信息并添加至模型输出中。支持自定义正则表达式和网页信息读取，推荐使用Llama-3-8B-instruct模型以实现高效搜索与信息提取。提供多种搜索后端与关键词检索器选项，提高兼容性和适用性。

访问官网访问官网GithubGithubHuggingfaceHuggingface论文论文
介绍相关项目
secret-llama - 浏览器端运行的私密LLM聊天机器人 支持多种开源模型
GithubLLMSecret LlamaWebGPU开源模型开源项目浏览器应用
Secret Llama是一款在浏览器中运行的私密LLM聊天机器人，支持Llama 3、Mistral等开源模型。对话数据完全保留在本地计算机，无需服务器或安装。界面易用性媲美ChatGPT，支持离线工作。运行需要支持WebGPU的现代浏览器，不同模型可能有特定内存要求。项目欢迎贡献者参与改进界面、扩展模型支持和优化加载性能。
spacy-llm - spaCy与大语言模型整合的NLP组件
GithubLarge Language ModelsNLPOpenAIspaCyspacy-llm开源项目
该模块将大型语言模型（LLMs）集成到spaCy中，实现了快速原型设计和提示生成，无需训练数据即可输出可靠的NLP结果。支持OpenAI、Cohere、Anthropic、Google PaLM、Microsoft Azure AI等API，并兼容Hugging Face上的开源LLMs，如Falcon、Dolly、Llama 2等。还支持LangChain，提供命名实体识别、文本分类、情感分析等多种现成任务。用户可通过spaCy的注册表轻松实现自定义功能。该模块结合LLM的强大功能与spaCy的成熟基础，提供灵活高效的NLP解决方案。
JsonLLM - 为大型语言模型提供JSON格式交互的开发工具
AI工具JSONJsonLLM加载数据程序
JsonLLM是一款专为大型语言模型(LLM)设计的交互工具。该工具采用JSON格式构建和处理LLM请求，为开发者提供高效的操作和调用方式。通过结构化和标准化的通信方法，JsonLLM有望提升AI开发效率和代码可读性。尽管当前网站内容较少，这款工具仍展现出成为LLM交互领域重要解决方案的潜力。
Llama3-Chinese-Chat - 基于Llama 3的中英双语优化大语言模型
ChineseGithubLlama3人工智能开源项目自然语言处理语言模型
Llama3-Chinese-Chat项目基于Meta-Llama-3-8B-Instruct模型开发，采用ORPO方法优化训练，大幅提升中英双语交互能力。该模型具备角色扮演、工具使用等功能，提供多种版本选择。最新v2.1版本在数学、角色扮演和函数调用方面性能显著提升，训练数据集扩充至10万对。项目同时提供Ollama模型和量化版本，便于快速部署使用。
awesome-LLM-resourses - 中文大语言模型全面资源汇总 数据处理到评估应有尽有
GithubLLMRAG大语言模型开源项目微调推理评估
该项目汇总了中文大语言模型(LLM)领域的全面资源，包含数据处理、微调、推理和评估等多个环节的开源工具。资源库涵盖最新LLM技术，并收录RAG系统和AI代理等前沿应用。项目为LLM研究者和开发者提供了丰富的工具和信息，有助于推进相关项目的开发与应用。
GraphRAG4OpenWebUI - 高级信息检索技术在 Open WebUI 的全面集成
GithubGraphRAGGraphRAG4OpenWebUILocal LLM信息检索嵌入模型开源项目
GraphRAG4OpenWebUI 为 Open WebUI 提供了一个强大而高效的信息检索系统，集成了微软研究院的 GraphRAG 技术，支持本地搜索、全球搜索和 Tavily 搜索。该项目专为需要精确和全面搜索结果的开放网络用户界面设计，并且支持本地语言模型和嵌入模型，增强了灵活性和隐私性。通过多个 API 接口，用户可以轻松实现复杂的信息检索需求。
Llama-3.2-1B-Instruct-GGUF - 通过量化优化技术改进多语言文本生成
GithubHuggingfaceLLMLlama 3.2Meta开源项目模型社区许可证许可协议
本项目采用llama.cpp和imatrix量化技术，提高了多语言文本生成的能力。结合Bartowski的校准文件，以及IQ和Q系列多种量化方法，明显降低了模型的困惑度并提高了文本生成的准确性。这些优化在多种条件下保持高效，且降低了存储空间的需求，提供更灵活的AI应用优化和部署方案。
ollama-grid-search - Rust构建的LLM模型和提示优化工具
A/B测试GithubOllamaRust参数优化开源项目模型评估
Ollama Grid Search是一款用Rust开发的工具，通过自动化选择和优化LLM模型、提示及推理参数，帮助用户进行组合迭代和结果可视化。适用于本地或远程Ollama服务器，支持多模型和参数的A/B测试，输出推理参数和响应元数据，并支持有限并发和同步推理调用。用户可以下载实验数据（JSON格式）并评估对比不同模型和提示组合。
ScaleLLM - 优化大语言模型推理，兼容多种开源模型
GithubScaleLLM大模型推理开源项目生产环境集成开发高效性能
ScaleLLM是一个为大语言模型（LLMs）设计的高效推理系统，适用于生产环境。支持Llama3.1、Gemma2、Bloom、GPT-NeoX等多种开源模型，集成了CUDA图、前缀缓存、分块填充和推测解码等高级功能。项目正在积极开发，目标是提高效率并加入更多特性。现已上架PyPI，可通过pip安装。ScaleLLM还提供兼容OpenAI的REST API和本地聊天机器人UI，支持离线批量推理和在线分布式推理。
LLM2LLM - 探索迭代数据增强提升语言模型性能
GSM8KGithubLLM2LLM大语言模型开源项目数据增强迭代学习
LLM2LLM项目提出了一种迭代数据增强方法，旨在提升大型语言模型的性能。该方法通过数据生成和筛选，创建高质量训练数据，逐步改进模型能力。研究团队在GSM8K等数据集上的实验证实了方法的有效性。项目已开源代码并提供复现指南，为相关研究和开发工作提供了参考资源。
相关项目
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型，免费访问各种图像生成与AI训练工具，从Stable Diffusion等基础模型开始，轻松实现创新图像生成。体验前沿的AI技术，推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器，它将改变您观看视频的方式！SubCat结合了先进的人工智能技术，为您提供即时视频字幕翻译，无论是本地视频还是网络流媒体，让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台，利用前沿AI技术，为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图，再到文案生成，美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务
投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号