Project Icon

code-indexer-loop

多语言代码索引和检索的Python开源工具

Code Indexer Loop是一个专注于代码索引和检索的Python开源库。它整合了LlamaIndex、tree-sitter等工具,支持多种编程语言的解析。该库采用tiktoken优化检索,通过LangChain生成嵌入,并使用ChromaDB存储。借助watchdog实现实时文件监控,Code Indexer Loop能够高效地维护最新的代码索引,为开发者提供快速、准确的代码片段检索服务。

syncode - 基于语法约束的LLM代码生成框架
GithubLLM生成SynCode上下文无关文法开源项目语法增强语法约束
SynCode是一个基于语法约束的代码生成框架,旨在提升大型语言模型(LLM)的代码生成质量。该框架确保LLM输出的代码在语法上正确,适用于多种通用编程语言。SynCode内置支持Python、Go和SQL等语言的语法规则,同时允许用户自定义语法。它可与HuggingFace模型无缝集成,实现高效的语法引导生成,仅增加10%的计算开销。SynCode在保证代码语法正确性的同时,还能维持较高的生成速度。
llvm-project - 开源编译器基础设施和工具链
ClangGithubLLVM中间表示代码优化开源项目编译器基础设施
LLVM是一个开源编译器基础设施项目,提供用于构建优化编译器和工具链的框架。核心组件包括LLVM后端、Clang前端、libc++标准库和LLD链接器。LLVM支持多种编程语言,提供中间表示处理和代码生成工具。项目致力于提高编译效率和代码性能,为开发者提供灵活的编译工具集。LLVM广泛应用于编译器开发、静态分析和运行时优化等领域。
QA-Pilot - 利用LLM模型的GitHub代码库交互式聊天工具
GitHub代码仓库GithubLLM模型QA-Pilotcode graph开源项目聊天功能
此项目是一个互动聊天工具,利用在线和本地LLM模型来快速理解和导航GitHub代码库。支持多种LLM模型如Ollama、OpenAI、Mistralai等,能够存储聊天记录、进行多聊天室会话,并快速定位会话。还集成了CodeGraph以查看Python文件。最新版本增加了对Moonshot和Nvidia API的支持,旨在验证本地解决方案的可行性,不建议用于分析关键数据或敏感代码库。
LLM2Vec-Meta-Llama-3-8B-Instruct-mntp - 基于大语言模型的文本编码器实现语义检索与文本嵌入
GithubHuggingfaceLLM2Vec开源项目文本编码机器学习模型语义相似度语言模型
LLM2Vec项目将解码器型大语言模型转换为文本编码器。项目采用双向注意力机制、掩码token预测和无监督对比学习方法,用于文本嵌入和语义相似度计算。通过Python接口实现文本理解和检索功能,支持自定义指令查询,可进行模型微调以提升性能。
chroma - 支持快速构建基于Python或JavaScript的语言模型(LLM)应用的嵌入式数据库
ChromaGithubJavaScriptPython嵌入数据库开源开源项目热门
Chroma是一个开源的嵌入式数据库,支持快速构建基于Python或JavaScript的语言模型(LLM)应用。该项目提供了适用于开发、测试和生产环境的统一API,并且具备集成、查询、过滤和密度估计等丰富特性。通过简洁的API和完整的文档,用户可以轻松管理和查询集合中的文档数据,支持自定义或自动嵌入。项目采用Apache 2.0许可证,免费开源,欢迎开发者加入其社区,共同推动项目发展。
llms_tool - 多功能大语言模型训练测试工具包
GithubHuggingFaceRLHF分布式训练大语言模型开源项目预训练
llms_tool是一个基于HuggingFace的大语言模型工具包,支持多种模型的训练、测试和部署。它提供预训练、指令微调、奖励模型训练和RLHF等功能,支持全参数和低参数量训练。工具包集成WebUI和终端预测界面,以及DeepSpeed分布式训练。涵盖ChatGLM、LLaMA、Bloom等主流模型,提供多种训练方法和量化选项。
llm-analysis - 大型语言模型训练与推理的延迟和内存使用分析工具
GithubTransformer模型llm-analysis内存分析大语言模型延迟分析开源项目
llm-analysis 是一款为大型语言模型(LLMs),如Transformer设计的工具,用于在不同的模型、GPU、数据类型和并行配置下估算训练与推理的延迟和内存使用。通过简单设置,可以快速计算出不同训练和推理方案的系统性能,以确定最优和可行的配置方案。此外,llm-analysis 支持多种并行化和重计算策略,并提供多种预定义配置和命令行接口,极大简化了配置和调试流程。它功能强大且易于集成,是开发和优化LLMs的理想工具。
CodeLlama-7b-Instruct-hf - Meta推出的7B参数代码生成模型 支持多语言编程
Code LlamaGithubHuggingface人工智能模型代码生成开发工具开源项目机器学习模型
CodeLlama-7b-Instruct-hf是Meta开发的7B参数代码生成模型,基于优化的Transformer架构。它支持代码补全、插入和指令跟随,适用于多种编程语言,尤其擅长Python。作为Code Llama系列的一员,该模型提供安全的代码助手功能,可用于商业和研究领域。
ml4code.github.io - 机器学习在大规模代码和自然语言处理中的应用综述
Github大代码开源项目文献综述机器学习自然性
ml4code.github.io 是一个关于机器学习在大规模代码和自然语言处理研究领域的综合性资源网站。该项目提供最新研究综述,涵盖领域前沿发展。作为一个动态更新平台,它不仅提供静态研究回顾,还鼓励研究者通过创建 Markdown 文件贡献工作和分类法。这种开放协作模式使其成为该领域最新进展的实时反映。这个开源项目托管在GitHub上,旨在成为机器学习应用于代码分析和自然语言处理的权威参考资源。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号