Project Icon

Awesome-Tool-Learning

大型语言模型工具学习研究与应用进展综述

Awesome-Tool-Learning汇集了工具学习领域的精选论文和应用。项目涵盖调查研究、微调、上下文学习等多个方向的最新进展,同时收录英文和中文资源。研究人员和开发者可通过该项目全面了解大型语言模型在工具使用方面的前沿发展。

优秀工具学习资源

Awesome License: MIT

收集了工具学习领域的优秀论文和应用。

📜 目录

📚 论文

📑 综述

  • 增强语言模型:一项综述,预印本 2023.02
    Grégoire Mialon, Roberto Dessì, Maria Lomeli, Christoforos Nalmpantis, Ram Pasunuru, Roberta Raileanu, Baptiste Rozière, Timo Schick, Jane Dwivedi-Yu, Asli Celikyilmaz, Edouard Grave, Yann LeCun, Thomas Scialom [pdf]

  • 基础模型的工具学习,预印本 2023.04
    Yujia Qin, Shengding Hu, Yankai Lin, Weize Chen, Ning Ding, Ganqu Cui, Zheni Zeng, Yufei Huang, Chaojun Xiao, Chi Han, Yi Ren Fung, Yusheng Su, Huadong Wang, Cheng Qian, Runchu Tian, Kunlun Zhu, Shihao Liang, Xingyu Shen, Bokai Xu, Zhen Zhang, Yining Ye, Bowen Li, Ziwei Tang, Jing Yi, Yuzhang Zhu, Zhenning Dai, Lan Yan, Xin Cong, Yaxi Lu, Weilin Zhao, Yuxiang Huang, Junxi Yan, Xu Han, Xian Sun, Dahai Li, Jason Phang, Cheng Yang, Tongshuang Wu, Heng Ji, Zhiyuan Liu, Maosong Sun [pdf]

  • 基于大型语言模型的自主代理综述,预印本 2023.08
    Lei Wang, Chen Ma, Xueyang Feng, Zeyu Zhang, Hao Yang, Jingsen Zhang, Zhiyuan Chen, Jiakai Tang, Xu Chen, Yankai Lin, Wayne Xin Zhao, Zhewei Wei, Ji-Rong Wen [pdf]

🏋️‍♂️ 通过微调实现工具使用

  • WebGPT:基于人类反馈的浏览器辅助问答 预印本 2021.12
    Reiichiro Nakano, Jacob Hilton, Suchir Balaji, Jeff Wu, Long Ouyang, Christina Kim, Christopher Hesse, Shantanu Jain, Vineet Kosaraju, William Saunders, Xu Jiang, Karl Cobbe, Tyna Eloundou, Gretchen Krueger, Kevin Button, Matthew Knight, Benjamin Chess, John Schulman [pdf]

  • TALM:工具增强语言模型 预印本 2022.05
    Aaron Parisi, Yao Zhao, Noah Fiedel [pdf]

  • WebShop:面向可扩展真实网络交互的基于语言的代理 NeurIPS 2022.07
    Shunyu Yao, Howard Chen, John Yang, Karthik Narasimhan [pdf] [github]

  • Toolformer:语言模型可以自学使用工具 预印本 2023.02
    Timo Schick, Jane Dwivedi-Yu, Roberto Dessì, Roberta Raileanu, Maria Lomeli, Luke Zettlemoyer, Nicola Cancedda, Thomas Scialom [pdf]

  • ToolCoder:教导代码生成模型使用API搜索工具 预印本 2023.05
    Kechi Zhang, Huangzhao Zhang, Ge Li, Jia Li, Zhuo Li, Zhi Jin [pdf]

  • WebCPM:用于中文长篇问答的交互式网络搜索 ACL 2023.05
    Yujia Qin, Zihan Cai, Dian Jin, Lan Yan, Shihao Liang, Kunlun Zhu, Yankai Lin, Xu Han, Ning Ding, Huadong Wang, Ruobing Xie, Fanchao Qi, Zhiyuan Liu, Maosong Sun, Jie Zhou [pdf]

  • ToolkenGPT:通过工具嵌入增强冻结语言模型的海量工具 预印本 2023.05
    Shibo Hao, Tianyang Liu, Zhen Wang, Zhiting Hu [pdf][github]

  • 通过执行反馈使语言模型成为更好的工具学习者 预印本 2023.05
    Shuofei Qiao, Honghao Gui, Huajun Chen, Ningyu Zhang [pdf]

  • Gorilla:连接海量API的大型语言模型 预印本 2023.05
    Shishir G. Patil, Tianjun Zhang, Xin Wang, Joseph E. Gonzalez [pdf]

  • GPT4Tools:通过自我指导教大型语言模型使用工具 预印本 2023.05
    Rui Yang, Lin Song, Yanwei Li, Sijie Zhao, Yixiao Ge, Xiu Li, Ying Shan [pdf] [github]

  • ToolAlpaca:通过3000个模拟案例实现语言模型的通用工具学习 预印本 2023.06
    唐巧宇, 邓子良, 林鸿宇, 韩先培, 梁桥, 孙乐 [pdf]

  • WebGLM:面向具有人类偏好的高效网络增强问答系统 KDD 2023.06
    刘晓, 赖涵宇, 于浩, 徐一凡, 曾奥涵, 杜正晓, 张鹏, 董宇晓, 唐杰 [pdf]

📖 通过上下文学习使用工具

  • PAL:程序辅助语言模型 预印本 2022.11
    高路宇, Aman Madaan, 周书言, Uri Alon, 刘鹏飞, 杨益明, Jamie Callan, Graham Neubig [pdf] [github]

  • 思维程序提示:解耦数值推理任务中的计算和推理 预印本 2022.11
    陈文虎, 马学光, 王欣怡, William W. Cohen [pdf]

  • ART:大型语言模型的自动多步推理和工具使用 预印本 2023.03
    Bhargavi Paranjape, Scott Lundberg, Sameer Singh, Hannaneh Hajishirzi, Luke Zettlemoyer, Marco Tulio Ribeiro [pdf]

  • TaskMatrix.AI:通过连接基础模型与数百万API完成任务 预印本 2023.03
    梁耀博, 吴晨飞, 宋婷, 吴文山, 夏岩, 刘宇, 欧阳, 陆帅, 季磊, 毛少光, 王云, 寿林军, 龚明, 段楠 [pdf]

  • HuggingGPT:利用ChatGPT及其在Hugging Face中的朋友解决AI任务 预印本 2023.03
    沈永亮, 宋凯涛, 谭旭, 李东升, 卢伟明, 庄越挺 [pdf]

  • OpenAGI:当大语言模型遇上领域专家 预印本 2023.04
    葛英强, 华文悦, 梅凯, 季建超, 谭俊涛, 徐书源, 李泽龙, 张永锋 [pdf]

  • ChemCrow:用化学工具增强大型语言模型 预印本 2023.04
    Andres M Bran, Sam Cox, Andrew D White, Philippe Schwaller [pdf]

  • GeneGPT:用领域工具增强大型语言模型以改善生物医学信息获取 预印本 2023.04
    金桥, 杨一帆, 陈庆宇, 吕志勇 [pdf]

  • 变色龙:大型语言模型的即插即用组合推理 预印本 2023.04
    卢攀, 彭宝琳, 程浩, Michel Galley, 张开伟, 吴映念, 朱松纯, 高峰 [pdf] [github]

  • ChatCoT:基于聊天的大型语言模型上的工具增强思维链推理 预印本 2023.05
    陈志鹏, 周坤, 张北辰, 龚铮, 赵鑫, 文继荣 [pdf]

  • CREATOR:通过工具创建分离大型语言模型的抽象和具体推理 预印本 2023.05
    钱程, 韩驰, Yi R. Fung, 秦宇嘉, 刘知远, 季婧 [pdf]

  • 作为工具制造者的大型语言模型 预印本 2023.05
    蔡天乐, 王雪芝, 马腾宇, 陈鑫云, 周丹尼 [pdf] [github]

  • MultiTool-CoT:GPT-3可以通过思维链提示使用多个外部工具 ACL 2023.05
    稻叶达郎, 清丸弘一郎, 程飞, 黑桥节夫 [pdf] [project]

  • RestGPT:通过RESTful API将大型语言模型与现实世界应用连接 预印本 2023.06
    宋一凡, 熊伟民, 朱大伟, 李成, 王可, 田野, 李斯江 [pdf]

  • AssistGPT:可以规划、执行、检查和学习的通用多模态助手 预印本 2023.06
    高迪飞, 季磊, 周罗威, 林庆宏, 陈乔雅, 樊子涵, 寿正宗 [pdf] [project]

  • GEAR:用通用高效工具解析增强语言模型 预印本 2023.07
    陆一宁, 于浩平, Daniel Khashabi [pdf]

  • 上下文技能提示:解锁大型语言模型的组合性 预印本 2023.08
    陈嘉傲, 潘小曼, 于典, 宋凯强, 王晓阳, 俞栋, 陈建树 [pdf]

  • 工具文档使大型语言模型能够零样本使用工具 预印本 2023.08
    谢承佑, 陈思安, 李春亮, 藤井康久, Alexander Ratner, 李臣宇, Ranjay Krishna, Tomas Pfister [pdf]

  • TPTU:基于大型语言模型的AI代理任务规划和工具使用 预印本 2023.08
    阮景晴、陈一虹、张斌、徐志伟、包天鹏、杜国庆、施世伟、毛航宇、曾星宇、赵睿 [pdf]

🧪 评估

  • tool_use_benchmark [github]
    一个大规模的工具使用基准测试,包括四个英语工具使用数据集和一个中文工具使用数据集。

  • API-Bank:一个用于工具增强型大语言模型的基准测试 预印本 2023.04
    李明浩、宋飞帆、于博文、于海洋、李舟军、黄飞、李永彬 [pdf]

  • 开源大型语言模型的工具操作能力研究 预印本 2023.05
    徐乾彤、洪枫璐、李博、胡长然、陈政宇、张剑 [pdf]

  • 评估和改进工具增强的计算密集型数学推理 预印本 2023.06
    张北辰、周坤、魏希林、赵鑫、沙静、王仕进、温季融 [pdf]

  • ToolQA:一个用于大语言模型使用外部工具进行问答的数据集 预印本 2023.06
    庄宇辰、余悦、王宽、孙浩天、张超 [pdf]

  • ToolLLM:促进大语言模型掌握16000多个真实世界的API 预印本 2023.07
    秦禹嘉、梁世豪、叶一宁、朱坤伦、闫岚、卢雅茜、林衍凯、丛鑫、唐祥如、钱比尔、赵思涵、田润初、谢若冰、周杰、Mark Gerstein、李大海、刘知远、孙茂松 [pdf]

  • AgentBench:评估大语言模型作为代理的能力 预印本 2023.08
    刘啸、于浩、张涵辰、徐一凡、雷轩宇、赖汉宇、顾宇、丁航亮、门凯文、杨可娟、张舒丹、邓翔、曾奥涵、杜正晓、张晨晖、沈圣、张天骏、苏宇、孙欢、黄民烈、董旭阳、唐杰 [pdf]

  • ToolTalk:在对话环境中评估工具使用 预印本 2023.11
    Nicholas Farn、Richard Shin [pdf]

  • TaskBench:大型语言模型任务自动化基准测试 预印本 2023.11
    沈永良、宋凯涛等 [pdf]

  • T-Eval:逐步评估工具利用能力 预印本 2023.12
    陈泽辉、赵峰等 [pdf]

📱 应用

  • Auto-GPT:一个实验性的开源项目,旨在使GPT-4完全自主。GitHub Repo stars

  • LangChain:通过组合性构建大语言模型应用。GitHub Repo stars

  • DB-GPT:利用私有大语言模型技术革新数据库交互。GitHub Repo stars

🎉 贡献者

项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

稿定AI

稿定设计 是一个多功能的在线设计和创意平台,提供广泛的设计工具和资源,以满足不同用户的需求。从专业的图形设计师到普通用户,无论是进行图片处理、智能抠图、H5页面制作还是视频剪辑,稿定设计都能提供简单、高效的解决方案。该平台以其用户友好的界面和强大的功能集合,帮助用户轻松实现创意设计。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号