Project Icon

Flyte

灵活高效的数据和机器学习工作流编排解决方案

Flyte是一个高度可扩展和灵活的工作流编排平台,可无缝整合数据、机器学习和分析工具链。它支持数据科学家和工程师轻松构建和管理生产级工作流,实现从本地开发到大规模部署的流畅过渡。Flyte提供强大的扩展性、数据血缘追踪和缓存机制,能处理从简单ETL到复杂机器学习训练等多样化工作流。该平台致力于简化工作流开发,使用户能专注于核心业务逻辑。

nflow - 灵活强大的业务流程编排工具
GithubnFlow工作流编排开源软件开源项目微服务状态机
nFlow是一款基于Java的开源业务流程编排工具,适用于微服务架构。它可用于微服务编排、保证交付计算、业务流程引擎替代和持久化有限状态机。nFlow支持代码定义工作流、可视化和嵌入式部署,具有高可用性和容错能力。它兼容多种关系型数据库,提供REST API和Explorer界面,是企业级应用可靠流程管理的理想选择。
hopsworks - 基于Python的机器学习特征库和MLOps平台
GithubHopsworksMLOpsML平台云服务开源项目特征存储
Hopsworks 是一个安全且可治理的数据平台,适用于机器学习资产的开发、管理和共享功能。支持特征库和模型管理,以及特征和训练管道的开发及运行。可作为独立特征库,支持云环境和本地部署,并无缝集成 AWS、Azure 和 GCP 等第三方平台。提供丰富的文档和教程以优化使用体验。
awesome-apache-airflow - Apache Airflow资源大全 工作流管理平台指南
Apache AirflowGithub工作流管理开源软件开源项目数据管道调度系统
本项目汇集了Apache Airflow的综合资源,包括部署方案、教程、最佳实践和工具库等。内容涵盖重要链接、视频教程和商业服务,为Airflow用户提供全面指南。项目持续更新,致力于成为Airflow社区的权威参考。
Domino Workflows - 简化数据和AI工作流程的开源可视化平台
AI工具协作平台可视化界面工作流数据处理
Domino Workflows是一个开源的可视化平台,用于创建、管理和部署数据和AI工作流程。平台提供图形界面,支持高级数据处理、机器学习和生成式AI算法集成。它强调功能模块的可重用性和可复现性,便于分享和协作。Domino具备实时监控和详细报告功能,支持团队合作。基于Apache Airflow和Kubernetes技术,保证了工作流程的可扩展性和稳定性。作为开源项目,Domino Workflows为数据科学家和业务专业人士提供了强大而灵活的工具,简化了复杂的数据和AI工作流程管理。
mleap - 快速部署机器学习流水线与算法的实用工具包
GithubMLeapScikit-learnSpark开源项目性能机器学习数据管道
MLeap提供高性能、便携、易于集成的生产库,支持将Spark和Scikit-learn的机器学习流水线导出为便携格式并执行。通过其执行引擎和序列化格式,数据科学家和工程师可以无需依赖Spark或Scikit-learn环境,将数据流水线和算法轻松部署到生产环境中。MLeap支持多种序列化格式(如JSON、Protobuf),并与现有技术高度集成,提供用户灵活定制数据类型和转换器的能力。
snorkel - 通过编程自动化构建和管理训练数据的新方法
AI应用GithubSnorkelSnorkel Flow开源项目弱监督建模机器学习
Snorkel项目由斯坦福大学发起,致力于通过编程自动化标注、构建和管理训练数据,重塑机器学习项目的成功要素。该项目不仅实现了其研究目标,还与Google、Intel等领先机构合作,支持生产部署,并发表了大量相关论文。Snorkel现已发展为Snorkel Flow,一个简化AI应用开发的端到端平台。
oneflow - 用户友好且高效扩展的深度学习框架
CUDA支持GithubOneFlowPyTorch API分布式训练开源项目深度学习框架
OneFlow是一款深度学习框架,提供类似PyTorch的API,支持n维并行执行的全局张量以及图编译器用于加速和部署模型。最新版本1.0.0已发布,兼容Linux和多个Python版本。用户可以通过Docker或Pip轻松安装,并利用丰富的文档和模型库快速上手,适合大型变压器模型的并行训练和计算机视觉任务。
Fast Data Analysis - 智能数据分析与可视化平台
AI助手AI工具协作可视化数据分析数据清理
Fast Data Analysis是一款革新性的AI驱动数据处理方案。通过GPT等先进机器学习技术,用户可在浏览器中通过自然语言对话轻松完成数据清理、分析和可视化,无需编程知识。平台支持线性回归、决策树等高级统计分析,并配备直观的数据编辑界面。具备多人协作功能,兼容多种数据格式,同时严格保障数据隐私。Fast Data Analysis致力于加速数据洞察获取,显著提升分析效率,适合各类数据处理需求,是数据分析领域的智能革命者。
fastflow - 基于Go语言的轻量级分布式工作流框架
DAGFastflowGithubgolang分布式工作流框架开源项目
Fastflow是基于Go语言的轻量级工作流框架,提供分布式高性能解决方案。采用DAG模型定义工作流,支持高并发任务执行和水平扩展。框架具备完善的API和可观测性,适用于离线任务、集群管理等复杂场景,可高效处理海量任务。Fastflow保持轻量级特性,易于集成到现有项目中。基于协程的任务执行和Leader-Worker架构,进一步提升了框架的性能和可扩展性。
venice - 全球工作负载的衍生数据存储平台
GithubVenice低延迟多租户多集群支持开源项目高吞吐量
Venice是一个衍生数据存储平台,提供高吞吐量的批处理和流处理数据异步摄取,低延迟的在线读取,基于CRDT的区域间主动主动复制,多集群支持和多租户水平伸缩能力。适用于Feathr等特征存储,支持离线、近线和在线工作负载的多种写操作和读取API,具有分片感知和本地缓存功能的客户端模式,满足不同性能和成本需求。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号