llama-cpp-agent
llama-cpp-agent 是一个开源框架,提供与大型语言模型(LLMs)互动的多种接口,包括对话、函数调用、结构化输出和基于工具的文本处理。兼容多种服务器和工具,适用于从日常对话到特定功能执行的各种应用场景,具有简单聊天、结构化输出、RAG(检索增强生成)和代理链功能。