Project Icon

hollama

为Ollama服务器打造的轻量级Web界面

Hollama是为Ollama服务器开发的轻量级Web界面。它具备大型提示框、Markdown渲染、代码编辑等功能,支持自定义系统提示。用户可复制代码片段、消息或整个会话,重试补全,数据存储于浏览器本地。Hollama采用响应式布局,提供明暗主题切换。该项目支持在线演示、桌面应用下载及Docker自托管,为AI爱好者和开发者提供了便捷的交互平台。

web-llm - 浏览器语言模型推理引擎,完全支持OpenAI API
GithubOpenAI API兼容性WebGPUWebLLM大语言模型开源项目浏览器内推理
WebLLM是一款借助WebGPU技术,实现硬件加速的浏览器内语言模型推理引擎,无需服务器即可直接在浏览器内运行。完全兼容OpenAI API,并具备流式输出和JSON模式生成功能,支持广泛的模型集成。通过NPM或CDN可以快速集成到各类AI交互应用中,同时确保用户隐私安全,并享受高效的GPU加速体验。
illa-builder - 快速构建内部工具的开源低代码平台
Github低代码平台内部工具开发实时协作开源软件开源项目自动化支持
ILLA Builder是一款开源低代码平台,专注于内部工具开发。它提供丰富的组件和操作库,显著提高开发效率。平台支持实时协作、自动化、自托管部署和页面设计,为开发者提供全面的解决方案。ILLA Builder适用于构建各类内部管理系统、数据可视化面板和自动化工作流等。其直观的界面设计和强大的功能使得即便是非专业开发人员也能快速上手,大幅降低了企业内部工具开发的门槛和成本。ILLA Builder致力于简化开发流程,助力团队快速构建高质量的内部工具。
exui - 基于ExLlamaV2的浏览器界面 简化本地大语言模型交互
ExLlamaV2ExUIGithub大语言模型开源项目本地推理用户界面
ExUI是基于ExLlamaV2开发的轻量级浏览器界面,用于本地大语言模型推理。该工具提供响应式界面、持久会话和多种指令格式,支持EXL2、GPTQ和FP16模型。ExUI具有推测性解码和记事本模式等特性,适用于本地环境和Google Colab,简化了大语言模型的交互过程。
galah - LLM驱动的动态响应与高度可配置的网络蜜罐解决方案
GalahGithubGoogleAILLMOpenAIweb honeypot开源项目
Galah是一个由LLM驱动的Web蜜罐工具,能够模拟各种应用并动态响应HTTP请求。支持OpenAI、GoogleAI、GCP的Vertex AI、Anthropic、Cohere和Ollama等主要LLM提供商。通过缓存机制降低API调用成本,可配置文件控制响应生成,适合本地部署和Docker运行。作为探索LLM生成HTTP消息的研究项目,不推荐用于生产环境。
exllama - 为现代GPU优化的快速内存高效Llama实现
AI模型CUDAExLlamaGPU加速Github开源项目深度学习
ExLlama是一个基于Python/C++/CUDA的独立实现,针对4位GPTQ权重进行了优化,旨在提高现代GPU上的运行速度和内存效率。该项目支持NVIDIA 30系列及更新的GPU,可处理Llama、Koala和WizardLM等多种大型语言模型。ExLlama具备基准测试、聊天机器人示例和Web界面等功能,同时支持Docker部署。尽管仍在开发中,项目已展现出卓越的性能和效率。
llamatutor - 开源AI个人辅导工具,由Llama 3 70B模型驱动
AI个人教师GithubLLM应用Llama TutorNext.js开源项目
LlamaTutor是一个开源AI个人辅导工具,基于Meta的Llama 3.1 70B模型。项目整合了Together AI用于LLM推理,Next.js和Tailwind构建界面,Serper提供搜索功能。此外,Helicone用于系统监控,Plausible负责网站分析。LlamaTutor旨在提供个性化学习体验,代表了教育技术的创新应用。
self-llm - 开源大模型部署与应用指南
AutoDLGithub开源大模型开源项目微调方法环境配置部署使用
探索开源大模型如LLaMA、ChatGLM的全流程部署与微调指南,涵盖环境配置至应用实践,专为国内初学者设计,通过AutoDL平台简化操作流程,助力大模型技术的普及和应用。
TinyLlama-1.1B-Chat-v1.0-llamafile - 紧凑型1.1B Llama Chat模型,适用于多种计算需求
GPUGithubHuggingfaceTinyLlama对话模型开源项目模型量化预训练
TinyLlama-1.1B-Chat经过3万亿个tokens的预训练,并在90天内优化完成。它提供API和CLI接口,采用与Llama 2相同的架构和分词器,适合内存和计算受限的环境,可以兼容多种开源项目。模型在合成数据集上的微调和与开源工具的对齐,增强了对话生成的多样性和准确性,适用于各种自然语言处理应用。
holoinsight - 专注实时日志分析的云原生可观测性平台
AI集成GithubHoloInsight云原生监控可观测性平台开源项目日志分析
HoloInsight作为一个云原生可观测性平台,专注于实时日志分析和AI集成。该平台提供高效的监控服务,助力深入洞察云原生应用。支持Docker快速启动和Kubernetes部署,并提供详细文档。HoloInsight采用开源Apache 2.0许可证,鼓励社区参与。
react-llm - 使用无头 React Hooks 在浏览器中运行 LLM,支持 WebGPU 加速
@react-llm/headlessGithubLLMReact HooksVicuna 7BWebGPU开源项目
提供简单易用的无头 React Hooks,利用 WebGPU 在浏览器中运行大语言模型(LLM),确保数据不离开浏览器。支持 Vicuna 7B 模型,允许自定义提示词和角色名称,提供令牌限制等功能。支持数据持久化存储和模型缓存,提升加载速度和用户体验。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

Project Cover

天工AI音乐

天工AI音乐平台支持音乐创作,特别是在国风音乐领域。该平台适合新手DJ和音乐爱好者使用,帮助他们启动音乐创作,增添生活乐趣,同时发现和分享新音乐。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号