Prophecis - 多租户机器学习平台

Prophecis 项目介绍

Prophecis 是由微众银行开发的一个集成式机器学习平台。该平台集成了多个开源机器学习框架，具备多租户集群管理能力，并为生产环境提供全栈容器部署和管理服务。

Prophecis 由五大核心服务构成：

Prophecis Machine Learning Flow：这是一款分布式机器学习建模工具，支持单机和分布式模式下的模型训练，兼容多种机器学习框架如 Tensorflow、Python 和 XGBoost，并提供从模型构建到部署的完整流程支持。
Prophecis MLLabis：这是一个用于机器学习开发和探索的工具。MLLabis 基于 Jupyter Lab 提供在线 IDE，并支持 GPU 和 Hadoop 集群的机器学习任务，支持 Python、R 和 Julia，并集成了调试和 TensorBoard 插件。
Prophecis Model Factory：该服务提供机器学习模型的存储、部署、A/B 测试以及模型管理等功能。
Prophecis Data Factory：为用户提供特征工程工具、数据标注工具和素材管理服务。
Prophecis Application Factory：该组件由微众的“大数据平台团队”和“AI部门”联合开发，基于青云开源系统 KubeSphere 的定制开发，提供 CI/CD 和 DevOps 工具，并拥有 GPU 集群监控和预警能力。

Prophecis 拥有以下几个显著的功能：

支持机器学习全生命周期：通过 AppJoint，Prophecis 的 MLFlow 可以嵌入到 DataSphere Studio 的工作流中，支持从数据上传、数据预处理、特征工程、模型训练、模型评估、模型发布到模型部署的整个过程。
一键模型部署服务： Prophecis 的 Model Factory 能够一键将 Prophecis Machine Learning Flow 和 MLLabis 生成的模型部署为 RESTful API 或 RPC 接口，实现模型与业务系统的无缝连接。
全面的管理平台：基于社区开源程序的定制，Prophecis 提供完整、可靠且高度灵活的企业级机器学习应用发布、监控、服务管理、日志收集和查询管理工具，能够全面控制机器学习应用，以满足企业在在线生产环境下的各种工作需求。