Prophecis 0.2.0 版本发布

Prophecis 是微众银行大数据平台团队开发的一站式机器学习平台，提供多种模型训练调试方式，集成多种开源机器学习框架，具备机器学习计算集群的多租户管理能力，提供生产环境全栈化容器部署与管理服务。

开源链接：

https://github.com/WeBankFinTech/Prophecis

Prophecis 0.2.0 新版本特性

01

特性增强

• 新增分布式建模模块(Prophecis DI)，支持拉起批量建模任务，提供单机 Tensorflow、XGBoost、PyTorch 等建模任务能力；

• 对接 Kubeflow Arena，支持分布式 Tensorflow 建模；

• 提供 CLI 工具，支持通过 CLI 工具调用分布式建模模块，可获取任务状态和执行日志；

• 建模任务支持复制、模版导出，可快速与 CLI 工具结合使用。

02

Bug 修复

• 修复 Helm Chart 配置中的错误配置。

03

新增模块介绍 

Prophecis DI 基于 IBM FfDL 进行改造，主要改造点如下：

• 对接 Kubeflow Arena，提供分布式 Tensorflow 任务能力；

• 修改 FfDL 单机建模任务的创建模式，任务发布时创建的资源修改为 Kubernetes Job，删除任务执行时创建 Helper 及 JobMonitor；

• 日志采集服务修改为 DaemonSet，采集工具修改为 Fluent Bit；

• 建模任务状态模式更改为独立服务 Job Monitor 负责；

• 容器目录新增 GUID 控制；

• 代码文件存储服务更改为 MinIO;

• CLI 增强，增加 Yaml 模版的参数替换，调用训练接口修改为 WebSocket，提供日志及状态翻转。

Prophecis 的核心组件主要是基于开源技术构建，从开源中来到开源中去，目前项目已经开源，欢迎社区的同学一起共建。

如您有兴趣，欢迎访问开源 Github: 

https://github.com/WeBankFinTech/Prophecis

WeDataSphere，BIG DATA MADE EASY.

用心做一度的开源社区

~欢迎关注~

扫码关注我们

微信公众号：WeDataSphere

GitHub：WeDataSphere

如果喜欢我们的产品或文章，请给我们的 GitHub 点上你宝贵的 star 和 fork 哦~~