写点什么

Apache DolphinScheduler

0 人感兴趣 · 16 次引用

  • 最新
  • 推荐
https://static001.geekbang.org/infoq/43/436e1dc4aa9ccbcd206cf3299e42577d.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

白鲸开源发布迁移工具 Airphin 并开源,2 步迁移 Airflow 至 Dolphinscheduler

白鲸开源正式发布调度系统迁移工具 Airphin,并宣布将其开源。借助 Airphin,用户可 2 步将调度系统从 Airflow 迁移至 Apache DolphinScheduler,为有调度系统迁移需要的用户带来极大便利。

BIGO 如何做到夜间同时运行 2.4K 个工作流实例?

主要介绍了 BIGO 如何使用 DophinScheduler 来调度以 Spark 为主的多种类型的离线任务,以及为了满足业务需求、提升用户使用体验,在 DS 和 Spark 上所做的各种改进。

https://static001.geekbang.org/infoq/86/8684eba973e1794fe2bd4449575c039c.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

突破单点瓶颈、挑战海量离线任务,Apache Dolphinscheduler 在生鲜电商领域的落地实践

惊喜:文末有插件推荐,随着大数据的进一步发展,不管是离线任务量还是实时任务量都变得越来越多,对调度系统的要求也越来越高,不仅要求系统稳定还要求操作简单,上手方便。

https://static001.geekbang.org/infoq/7b/7be5460fd6cc069cb930998e47881a42.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

倒计时 2 日!基于 Apache DolphinScheduler&TiDB 的交叉开发实践,从编写到调度让你大幅提升效率

当大数据挖掘成为企业赖以生存、发展乃至转型的生命,如何找到一款好软件帮助企业满足需求,成为了许多大数据工程师困扰的问题。但在当下高速发展的大数据领域,光是一款好软件似乎都不足以满足所有场景业务需求,许多企业逐渐将目光转向了技术生态的“外延”

https://static001.geekbang.org/infoq/59/59be4054a82708aaccd8207d8474c6f5.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Apache Dolphinscheduler3.0.0-beta-1 版本发布,新增 FlinkSQL、Zeppelin 任务类型

导读:近日,Apache Dolphin Scheduler 迎来了 3.0.0-beta-1 版本的正式发布。新版本主要针对 3.0.0-alpha 进行了代码和文档的修复,并引入了部分的功能,如支持 FlinkSQL 任务类型,新增 Zeppelin 任务类型,新增 Kubernetes namespace 管理功能,以及通过

中国联通改造 Apache DolphinScheduler 资源中心,实现计费环境跨集群调用与数据脚本一站式访问

用户规模达4.6亿,每天处理话单量超过400亿条。拥有如此庞大体量的中国联通,始终思考着一个问题,该如何提高服务水平,为客户提供更有针对性的服务。如今,中国联通已在海量数据汇集、加工、脱敏、加密等技术与应用方面已崭露头角。

https://static001.geekbang.org/infoq/1f/1f4941ade7a474311c95908c889c4d70.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

【喜讯】Apache DolphinScheduler 荣获 “2020 年度十大开源新锐项目”

用户头像
代立冬
2020-11-22

经 10000+ 开发者公开票选,20+专家评审、 10+ 主编团打分,历经数月打磨,11 月 19 日,由InfoQ 发起并组织的【2020中国技术力量年度榜单评选】结果正式揭晓。

https://static001.geekbang.org/infoq/e9/e9a8181c9647823fce0dbe7c5f3a764e.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Apache DolphinScheduler 是如何走进 Apache 的

用户头像
代立冬
2020-11-09

Apache DolphinScheduler的诞生的完整介绍,DolphinScheduler简称”DS”, 中文名 “小海豚调度”(海豚聪明、人性化,又左右脑可互相换班,终生不用睡觉)。希望 DolphinScheduler 就像它的名字一样,成为一个“开箱即用”的灵活易用的调度系统

https://static001.geekbang.org/infoq/6c/6c0616d424d4449a8a0074d05c852f42.jpeg?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

大数据任务调度 - 有向无环图 (DAG) 之拓扑排序

用户头像
代立冬
2020-09-11

有向无环图(DAG) 是大数据任务调度的核心基础知识,其源自于大学时期的数据结构,可能很多伙伴已经还给老师了,哈哈

Apache DolphinScheduler_Apache DolphinScheduler技术文章_InfoQ写作社区