写点什么

二次开发必看!DolphinScheduler 3.1.9 开发环境搭建指南

作者:白鲸开源
  • 2025-07-22
    天津
  • 本文字数:1410 字

    阅读完需:约 5 分钟

二次开发必看!DolphinScheduler 3.1.9 开发环境搭建指南

在生产实践中,Apache DolphinScheduler 3.1.9 版本因其稳定性和成熟的特性,成为众多企业用户的首选版本。随着使用深入,不少用户希望在此基础上进行二次开发,以更好地满足自身业务需求。然而,开展二次开发前,搭建完善的本地开发环境至关重要。本文结合真实案例,详细介绍 DolphinScheduler 3.1.9 的二次开发环境配置流程,希望为有定制化开发需求的用户提供实用、可靠的参考。

准备工作

在搭建 DolphinScheduler 开发环境之前请确保你已经安装以下软件:


  • Git

  • JDK: v1.8.x (注意 DolphinScheduler3.1.9 只能安装 jdk v1.8.x 不能升级)

  • Maven: v3.5+

  • Node: v16.13+ (dolphinScheduler 版本低于 3.0, 请安装 node v12.20+)

  • Pnpm: v6.x(注意 DolphinScheduler3.1.9 只能安装 Pnpm v6.x 不能升级)

打开 pom.xml 文件

使用 idea 打开 pom.xml 文件,作为项目打开。在.idea 目录下找到workspace.xml,在PropertiesComponent属性下增加下面这一行。“dynamic.classpath”: “true“


下载 ZooKeeper 并解压

在 ZooKeeper 的目录下新建 Data 文件夹。


将 conf 目录下的 zoo_sample.cfg 文件复制一份,重命名为 zoo.cfg,修改其中数据的配置,如下:


dataDir路径设置为刚刚新建的 Data 文件夹目录。



然后启动服务,运行 ./bin/zkServer.cmd

修改数据库配置

打开dolphinscheduler-bom模块的pom文件修改数据库配置。


使用 postgresql 不用修改,使用 mysql 则需要修改。将 MySQL 的依赖中的test改为compile右上角的Maven要记得点击进行更新。


创建数据库并初始化

安装 mysql,推荐使用 8.0.16+。


创建完数据库后进行初始化。如下图所示,将文件中的 sql 语句复制出来在数据库上执行初始化。


配置 MySQL

配置dolphinscheduler-alertdolphinscheduler-apidolphinscheduler-masterdolphinscheduler-workerapplication.yaml文件和logback-spring.xml文件,把postgresql改为 mysql 配置并修改日志级别。


例如dolphinscheduler-master配置 mysql 如下所示:



例如dolphinscheduler-master修改日志级别,以及在logback-spring.xml文件中修改如下所示:


修改模块配置

修改dolphinscheduler-ui模块的 package.json


为了避免版本冲突,打开dolphinscheduler-ui模块的package.json文件,去除所有^符号。


启动后端服务和前端服务

我们需要启动三个服务,包括MasterServerWorkerServerApiApplicationServer


  • MasterServer:在Intellij IDEA中执行 org.apache.dolphinscheduler.server.master.MasterServer中的main方法,并配置VM Options -Dlogging.config=classpath:logback-spring.xml -Ddruid.mysql.usePingMethod=false -Dspring.profiles.active=mysql

  • WorkerServer:在Intellij IDEA中执行 org.apache.dolphinscheduler.server.worker.WorkerServer中的mai方法,并配置VM Options -Dlogging.config=classpath:logback-spring.xml -Ddruid.mysql.usePingMethod=false -Dspring.profiles.active=mysql

  • ApiApplicationServer:在Intellij IDEA中执行 org.apache.dolphinscheduler.api.ApiApplicationServer中的main方法,并配置VM Options -Dlogging.config=classpath:logback-spring.xml -Dspring.profiles.active=api,mysql


打开运行配置,打开添加虚拟机选项然后输入上述命令并确定,即可完成配置。



最后在dolphinscheduler-ui目录下运行如下命令,安装前端依赖并运行前端组件:



运行起来后就会看见端口,浏览器打开即可看到网页。




原文链接:https://blog.csdn.net/qq_42838399/article/details/149167971

用户头像

白鲸开源

关注

一家开源原生的DataOps商业公司。 2022-03-18 加入

致力于打造下一代开源原生的DataOps 平台,助力企业在大数据和云时代,智能化地完成多数据源、多云及信创环境的数据集成、调度开发和治理,以提高企业解决数据问题的效率,提升企业分析洞察能力和决策能力。

评论

发布
暂无评论
二次开发必看!DolphinScheduler 3.1.9 开发环境搭建指南_大数据_白鲸开源_InfoQ写作社区