chain-of-thought-hub

大型语言模型复杂推理能力评估基准

复杂推理能力大语言模型 Chain-of-Thought LLM评估长文本处理 Github 开源项目

Chain-of-Thought Hub汇集了数学、科学、符号推理等多个领域的挑战性任务，旨在全面评估大型语言模型的复杂推理能力。该项目通过精选数据集和模型，为语言模型发展提供可靠参考。同时，它将链式思考提示工程视为新一代系统调用，为基于大型语言模型的应用生态系统发展奠定基础。

Github

论文

介绍相关项目

HalluQA - 中文大语言模型幻觉评估基准

GithubHalluQA中文幻觉大型语言模型开源项目评估基准问答任务

HalluQA是一个评估中文大语言模型幻觉问题的基准测试。该项目包含450个涵盖多领域的对抗性问题，考虑中国特色文化因素。HalluQA提供数据集、评估脚本和多选任务，采用GPT-4评估非幻觉率。研究结果揭示不同模型在处理误导性和知识性问题的表现，为中文大语言模型的改进提供参考。

LLM-Tool-Survey - 大型语言模型工具学习调查研究

Github人工智能大语言模型工具学习开源项目综述自然语言处理

该研究系统性调查大型语言模型(LLMs)通过工具学习增强解决复杂问题能力。从工具学习的优势和实现方法两方面全面回顾现有文献,总结基准测试和评估方法,讨论当前挑战和未来方向,为相关研究和开发提供见解。

EvaluationPapers4ChatGPT - ChatGPT等大型语言模型评估资源库

ChatGPTGithub大语言模型开源项目性能测试自然语言理解评估

EvaluationPapers4ChatGPT项目是一个综合性资源库，专注于评估ChatGPT等大型语言模型的性能。该项目汇集了丰富的数据集、评估论文和检测工具，涵盖自然语言理解、伦理偏见、长文本摘要和推理能力等多个领域。研究人员可借此深入分析ChatGPT的能力范围及其在不同任务中的表现。项目不断更新，反映了语言模型评估领域的最新发展动态。

llmperf-leaderboard - LLM推理服务性能基准测试与比较

GithubLLMPerfLLM推理提供商吞吐量响应时间开源项目性能基准测试

LLMPerf Leaderboard 项目对多家LLM推理服务进行性能评测，主要衡量输出令牌吞吐量和首个令牌响应时间(TTFT)。测试涵盖Llama-2系列的7B、13B和70B聊天模型，为开发者提供客观透明的性能数据和可复现的测试方法，有助于选择合适的LLM服务。

llemma_7b - 数学推理与计算结合的开源数学语言模型

GithubHuggingfaceLlemma定理证明开源项目数学模型计算工具链式思维

Llemma 7B 是一款以数学推理为核心的语言模型，整合了使用Python和定理证明等工具的计算能力。在数学链式思维任务中，该模型的表现优于同类产品，如Llama-2和Code Llama以及同规格的Minerva版本。其34B参数版本在多个数学数据集测试中表现尤为突出。

TransformerHub - 实现与参考多种Transformer模型

BERTGPTGithubTransformerTransformerHubViT开源项目

此项目实现了多种Transformer架构，包括seq2seq、仅编码器、仅解码器和统一模型，旨在提高编程技能并提供深度学习参考。特色包括多种Attention模块、位置嵌入和采样方法，当前进展是实现DINO模型。项目受到多个开源项目的启发和支持。

internlm2_5-1_8b-chat - 开源18亿参数模型提升推理能力与工具调用效率

GithubHuggingfaceInternLM工具利用开源模型开源项目推理能力模型模型性能

InternLM2.5是一个开源的18亿参数基础模型，拥有卓越的数学推理和增强的工具调用能力，其能够从多个网页搜集信息并进行分析和指令理解。在OpenCompass的评测中，该模型在MATH、GPQA等基准测试中表现突出。尽管在推理和综合能力上具有优越性，仍需注意潜在的风险输出。通过Transformers和LMDeploy工具，用户可以轻松加载和部署此模型以适应多种应用场景。

ControlLLM - 通过图搜索增强大语言模型工具使用能力实现复杂任务解决

ControlLLMGithub任务分解图搜索多模态工具大语言模型开源项目

ControlLLM框架通过图搜索方法提升大语言模型的多模态工具使用能力。其核心包括任务分解器、基于图的思维范式和执行引擎，有效解决复杂任务。该框架在图像、音频和视频处理等领域展现出高准确性和效率，为大语言模型应用开辟新途径。

langchainjs - LangChain.js 为LLM应用开发提供灵活强大的框架

AI应用开发GithubLangChain开源框架开源项目自然语言处理语言模型

LangChain.js是一个JavaScript框架，用于开发语言模型驱动的应用。它提供丰富的组件和集成，支持上下文感知和推理能力。框架包含开源库、生产化工具和部署选项，适用于构建问答系统和聊天机器人等应用。LangChain.js兼容多种环境，如Node.js、浏览器和Deno，为开发者提供灵活工具，助力创建复杂的LLM应用。

AIHub - 多模型支持的AI助手客户端，具备丰富自定义功能

AIHubChatGPT PlusGithub大模型开源项目知识库自定义插件

AIHub是一款集成多个大模型API的客户端，用户可以轻松构建自定义AI助手。它支持文本对话、图片对话、AI绘画和丰富的自定义插件，还可以搭建个人知识库和生成智能报告。支持多语言和多主题配置，并兼容OpenAI、Ollama、谷歌 Gemini、讯飞星火、百度文心等平台，扩展了AI的应用场景。

相关项目

推荐项目

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

吐司

探索Tensor.Art平台的独特AI模型，免费访问各种图像生成与AI训练工具，从Stable Diffusion等基础模型开始，轻松实现创新图像生成。体验前沿的AI技术，推动个人和企业的创新发展。

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器，它将改变您观看视频的方式！SubCat结合了先进的人工智能技术，为您提供即时视频字幕翻译，无论是本地视频还是网络流媒体，让您轻松享受各种语言的内容。

美间AI

美间AI创意设计平台，利用前沿AI技术，为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图，再到文案生成，美间让创意设计更简单、更高效。

稿定AI

稿定设计是一个多功能的在线设计和创意平台，提供广泛的设计工具和资源，以满足不同用户的需求。从专业的图形设计师到普通用户，无论是进行图片处理、智能抠图、H5页面制作还是视频剪辑，稿定设计都能提供简单、高效的解决方案。该平台以其用户友好的界面和强大的功能集合，帮助用户轻松实现创意设计。

使用协议隐私政策广告服务

投诉举报邮箱: service@vectorlightyear.com