Project Icon

csghub-server

开源大型模型资产管理平台

CSGHub Server是一个开源的大型模型资产管理平台,通过REST API提供模型、数据集和其他AI资产的管理功能。核心特性包括用户组织管理、自动标签、搜索、数据集预览、内容审核、文件下载和活动追踪。支持灵活配置Git服务器和LFS存储系统,适应不同场景需求。作为AI资产管理解决方案,CSGHub Server致力于简化开发流程,提高资源利用效率。

英文简体中文

CSGHub Server 是开源可靠的大模型资产管理平台 CSGHub 的一部分。它通过 REST API 专注于管理模型、数据集和其他 LLM 资产。

主要特性:

  • 用户和组织的创建与管理
  • 模型和数据集标签的自动标注
  • 搜索用户、组织、模型和数据
  • 在线预览数据集文件,如 .parquet 文件
  • 文本和图像的内容审核
  • 单个文件的下载,包括 LFS 文件
  • 追踪模型和数据集的活动数据,如下载量和点赞量

演示

为了帮助用户快速了解 CSGHub 的功能和用法,我们录制了一个演示视频。您可以观看这个视频,快速了解该程序的主要功能和操作流程。

  • CSGHub 演示视频如下,您也可以在 YouTubeBilibili 上查看

请访问 OpenCSG 网站 体验强大的管理功能。

快速开始

系统资源要求:4核 CPU/8GB 内存

请自行安装 Docker。本项目已在 Ubuntu22 环境下测试。

您可以通过 docker-compose 快速部署本地化的 CSGHub Server 服务:

# API 令牌应至少 128 个字符长,对 csghub-server 的 HTTP 请求需要将 API 令牌作为 Bearer 令牌发送以进行身份验证。
export STARHUB_SERVER_API_TOKEN=<API 令牌>
mkdir -m 777 gitea minio_data
curl -L https://raw.githubusercontent.com/OpenCSGs/csghub-server/main/docker-compose.yml -o docker-compose.yml
docker-compose -f docker-compose.yml up -d

技术架构

csghub-server 架构

可扩展和可定制

  • 支持不同的 git 服务器,如 Gitea、GitLab 等。
  • 支持灵活配置 LFS 存储系统,您可以选择使用本地或任何兼容 S3 协议的第三方云存储服务。
  • 按需启用内容审核,可选择任何第三方内容审核服务。

路线图

  • 支持更多 Git 服务器:目前支持 Gitea,未来计划支持主流 Git 仓库。
  • Git LFS:Git LFS 支持大文件,支持 Git 命令操作和通过 Web UI 在线下载。
  • 数据集在线查看器:数据集预览,支持 LFS 格式数据集的 Top20/TopN 加载预览。
  • 模型/数据集自动标签:支持自定义元数据和自动提取模型/数据集标签。
  • S3 协议支持:支持 S3 (MinIO) 存储协议,提供更高的可靠性和存储成本效益。
  • 模型格式转换:主流模型格式的转换。
  • 模型一键部署:支持与 OpenCSG llm-inference 集成,一键启动模型推理。

许可证

我们使用 Apache 2.0 许可证,详细内容请查看 LICENSE 文件。

贡献

如果您希望贡献,请遵循贡献指南。我们非常期待您的贡献!

致谢

本项目基于 Gin、DuckDB、minio 和 Gitea 等开源项目。我们对他们的开源贡献表示衷心的感谢!

联系我们

如果您在使用过程中遇到任何问题,可以通过以下任何方式与我们联系:

  1. 在 GitHub 上提出 issue
  2. 扫描微信助手二维码加入我们的微信群
  3. 加入我们的官方 Discord 频道:OpenCSG Discord 频道
  4. 加入我们的 Slack 工作区:OpenCSG Slack 频道
                                     
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能,包括文生视频、动态画面和形象生成等,帮助用户快速上手,创造专业级内容。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台,用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品,帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型,为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能,满足事务性工作的高频需求,帮助撰稿人节省精力,提高效率,优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号