Project Icon

sparsegpt

开源项目实现大型语言模型高效压缩

SparseGPT是一个致力于大型语言模型压缩的开源项目。它提供了一套工具,可在单次操作中对OPT、BLOOM和LLaMA等大规模语言模型进行精确剪枝。该项目支持非结构化、n:m结构化和稀疏量化压缩方法,并包含在WikiText2、PTB和C4子集上评估模型性能的脚本。SparseGPT能有效缩减模型规模的同时保持准确性,为研究人员和开发者提供了探索语言模型压缩的实用工具。

MemGPT - 构建具有长期记忆的智能代理工具
GithubLLMMemGPT开源项目热门状态管理自定义工具长期记忆
MemGPT是一款创新的工具,可帮助用户通过支持长期存储和状态管理快速构建和部署具有状态的大型语言模型代理。MemGPT支持连接外部数据源(例如PDF文件)以进行检索式增强生成,并定义及调用自定义工具,如谷歌搜索。此外,MemGPT还支持多用户、多代理应用程序的服务部署,是企业和开发者构建先进语言模型应用的理想选择。
gpt-bat - 长文本分割与处理工具,优化GPT性能
API2DGPT BATGPT-3.5GithubOpenAI开源项目长文本处理
GPT BAT是一款专为GPT设计的优化工具,可以将长文本按行、按长度或按特定字符分隔,并灵活设置接口调用参数,如System提示词、User提示词和Max Tokens。兼容OpenAI和API2D接口,支持文本分段预览和Token消耗估算,处理结果将自动下载,允许重复尝试,显著提升GPT-3.5处理长文本的效率和便捷性。
GPT2-Chinese - GPT2-Chinese:支持多种中文Token化和大规模语料训练
BERT分词器GPT2-ChineseGithubHuggingface中文语言模型开源项目预训练模型
GPT2-Chinese项目提供了适用于中文的GPT2训练代码,支持BERT和BPE Tokenizer,能够生成诗词、新闻、小说等内容,适用于大规模语料训练。该项目基于Pytorch实现,支持最新的预训练模型,如通用中文模型和古诗词模型。详细的模型信息可以在Huggingface Model Hub中找到。用户可以自行训练和生成文本,同时支持FP16和梯度累积。
gpt2 - HPU处理器上运行GPT2的Gaudi配置方案
GithubHuggingfaceOptimum Habana人工智能开源项目机器学习模型模型训练硬件加速
GPT2模型在Habana Gaudi处理器(HPU)上的优化配置方案,通过GaudiConfig文件实现Fused Adam优化、梯度裁剪和混合精度训练。基于Optimum Habana接口,支持单/多HPU环境下的模型加载、训练和推理,可用于各类下游任务。配置方案与Transformers库完全兼容,并提供HPU专属训练参数。
EDA-GPT - 全方位数据分析工具 支持结构化与非结构化数据探索
EDA GPTGithub大语言模型开源项目数据分析结构化数据非结构化数据
EDA-GPT是一款开源数据分析工具,支持结构化和非结构化数据处理。该工具可分析CSV、XLSX、SQLite等格式的结构化数据,以及PDF和图像等非结构化数据。EDA-GPT提供直观界面,集成多种LLM模型,具备图表生成、数据清理和多模态搜索功能。它简化了数据分析流程,有助于用户快速探索数据并获取洞察。
optimized-gpt2-250m - 深入解析优化版GPT-2的模型特性与技术实现
GithubHuggingfacetransformers人工智能开源项目机器学习模型模型卡片自然语言处理
optimized-gpt2-250m是一个基于GPT-2架构的优化模型,具备250M参数规模。模型文档涵盖核心技术参数、应用场景、训练方法、性能评估等技术细节,同时阐述了模型局限性与最佳实践。适合开发者了解模型性能并进行实际部署。
Top-GPTs - GPT Store中顶级的GPT模型集锦
GPTGPT modelsGithub多功能性应用程序开源项目演示
该项目列举了GPT Store中顶级的GPT模型,无需ChatGPT Plus订阅即可使用。这些模型涵盖了从编码解释、内容创作到市场营销等多种应用领域。项目还提供了可供添加身份验证、分析和收益化的链接,进一步增强了GPT的功能多样性。
opt-30b - Meta AI开发的开源预训练语言模型GPT-3替代方案
GithubHuggingfaceOPT人工智能开源项目机器学习模型自然语言处理语言模型
OPT是Meta AI推出的Transformer语言模型系列,最大规模达175B参数。模型基于800GB数据训练,包含BookCorpus、CC-Stories等多个数据集,支持文本生成和下游任务微调。其开源性质使研究人员能够深入研究大规模语言模型的性能表现、伦理影响及安全性问题。
FinGPT - 开源金融大模型FinGPT,快速适应市场变化
FinGPTGithub开源项目情感分析指令调优数据集金融大语言模型
FinGPT项目提供开源金融大语言模型,重点解决金融行业的高训练成本和频繁更新需求。利用RLHF技术,实现了金融数据的快速更新和轻量级适配,并降低微调费用。FinGPT-Forecaster和多任务情感分析模型的性能超过GPT-4,展现出在金融预测和情感分析方面的强大能力。开源平台和丰富的数据集使开发者能够轻松再现和应用这些先进模型。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

稿定AI

稿定设计 是一个多功能的在线设计和创意平台,提供广泛的设计工具和资源,以满足不同用户的需求。从专业的图形设计师到普通用户,无论是进行图片处理、智能抠图、H5页面制作还是视频剪辑,稿定设计都能提供简单、高效的解决方案。该平台以其用户友好的界面和强大的功能集合,帮助用户轻松实现创意设计。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号