Logo
Project Icon

data-on-eks

在Amazon EKS上构建和优化数据和AI/ML平台的综合资源

Amazon EKSAI/ML数据分析流媒体平台分布式数据库Github开源项目

Data on EKS是一个开源项目，提供全面的Terraform蓝图和最佳实践，帮助在Amazon EKS上扩展和优化数据与AI/ML工作负载。通过AWS Trainium、AWS Inferentia和NVIDIA GPUs等资源，用户可以部署多种解决方案，例如Apache Spark和TensorFlow。访问Data on EKS网站，了解如何创建强大集群，并探索AI/ML平台、数据分析和流处理工具的使用指南，有效管理数据工作负载。

访问官网访问官网GithubGithubHuggingfaceHuggingface文档文档
介绍相关项目
aws-open-data-geo - AWS地理空间开放数据集的简化访问工具
AWSGitHubGithubpandas地理空间数据集开放数据开源项目
aws-open-data-geo项目整合了AWS Open Data平台上的地理空间数据集，每日更新并提供CSV和JSON格式。这种整理方式便于程序化调用和数据分析，简化了地理空间数据的获取和处理流程。项目通过提供标准化的数据访问方式，促进了开放地理数据在实际应用中的使用。
BigDL-2.x - BigDL提供多种库实现数据分析与AI应用的无缝扩展
BigDLGithubIPEX-LLMLLMNanoOrca开源项目
BigDL提供多种库，用于扩展和加速数据分析与AI应用。主要功能包括分布式大数据和AI的Orca，加速TensorFlow和PyTorch的Nano，深度学习的DLlib，时间序列分析的Chronos，推荐系统的Friesian以及安全大数据和AI的PPML。这些功能使AI应用可以从本地计算机无缝扩展到云端，实现高效分布式数据处理和深度学习开发。
terraform-kubestack - Terraform框架为Kubernetes平台工程提供强大支持
GitOpsGithubKubernetesKubestackTerraform平台工程开源项目
Kubestack是为Kubernetes平台工程团队设计的开源Terraform框架。它支持在单一Terraform代码库中定义完整云原生堆栈，并通过GitOps实现平台的安全持续演进。该框架采用约定优于配置的方法，提供强大的平台架构和GitOps工作流，以及可扩展、低维护的Terraform代码库。Kubestack让整个工程团队能够充分利用平台能力，同时确保应用环境安全。
chronon - 简化AI/ML应用的数据计算和服务平台
AI/MLChrononGithub回填在线服务开源项目数据平台
Chronon 是一个数据平台，专为 AI/ML 应用简化数据计算和服务的复杂性。主要功能包括批处理和流计算、可扩展的历史数据回填、低延迟服务、数据准确性和一致性保证，以及丰富的观察和监控工具。Chronon 能处理组织内的各种数据类型，支持在线和离线一致性，提升模型训练和评估效率。了解更多详情，请访问 chronon.ai。
applied-ai-engineering-samples - Google Cloud AI工程资源，参考指南、蓝图和代码示例
GithubGoogle CloudVertex AI人工智能代码示例基础设施开源项目
这个开源项目提供了Google Cloud应用AI工程的参考资料，包括Vertex AI生成式AI模型的使用指南和Google Cloud AI/ML基础设施的最佳实践。项目包含代码示例、实践实验和蓝图，旨在帮助开发者更好地利用Google Cloud的AI能力，适用于大规模AI/ML工作负载。
practical-mlops-book - MLOps实践指南 从概念到生产部署
DevOpsGithubMLOpsedX云计算开源项目机器学习
该书全面阐述MLOps实践，包括基础概念和高级部署策略。探讨持续交付、AutoML、监控和日志等主题，并针对AWS、Azure、GCP等云平台给出实施方法。结合代码示例和案例研究，指导读者将机器学习模型部署到生产环境。
hbox - 高效的AI和大数据调度平台，支持多种深度学习框架
GithubHadoop YarnHbox人工智能大数据开源项目深度学习框架
Hbox是一个高效的调度平台，结合了大数据和人工智能技术。支持多种机器学习和深度学习框架，如TensorFlow、MXNet、PyTorch等，并运行在Hadoop Yarn上。平台支持GPU资源调度、Docker容器化和RESTful API接口管理，具备良好的扩展性和兼容性。Hbox还提供统一的数据管理和可视化界面，适用于分布式计算和模型训练。
mlstacks - 简化MLOps基础设施部署的开源工具
GithubMLOpsMLStacksTerraformZenML基础设施部署开源项目
MLStacks是一个开源Python工具，通过Terraform实现快速部署MLOps基础设施。虽然主要设计用于ZenML，但也兼容其他MLOps工具和平台。用户只需编写YAML规范文件并使用CLI部署，MLStacks即可自动完成剩余工作。目前支持在AWS、GCP和本地K3D上部署模块化MLOps堆栈。该工具旨在简化部署流程，方便用户评估不同MLOps工具组合。
_Book_k8sInfra - 实用指南构建容器化基础架构
DockerGithubKubernetes基础设施容器开源项目自动化部署
本项目提供容器基础设施环境搭建指南,涵盖Kubernetes、Docker等核心组件。利用Vagrant自动部署测试环境,配套YAML文件和Shell脚本。适合开发运维人员学习现代容器技术,快速构建和管理容器化应用。重点介绍实践步骤,助力掌握容器化基础架构。内容涵盖理论知识和动手实践,循序渐进讲解关键概念和操作步骤。
相关项目
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型，免费访问各种图像生成与AI训练工具，从Stable Diffusion等基础模型开始，轻松实现创新图像生成。体验前沿的AI技术，推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器，它将改变您观看视频的方式！SubCat结合了先进的人工智能技术，为您提供即时视频字幕翻译，无论是本地视频还是网络流媒体，让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台，利用前沿AI技术，为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图，再到文案生成，美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务
投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号