二次开发必看!DolphinScheduler 3.1.9 开发环境搭建指南

在生产实践中,Apache DolphinScheduler 3.1.9 版本因其稳定性和成熟的特性,成为众多企业用户的首选版本。随着使用深入,不少用户希望在此基础上进行二次开发,以更好地满足自身业务需求。然而,开展二次开发前,搭建完善的本地开发环境至关重要。本文结合真实案例,详细介绍 DolphinScheduler 3.1.9 的二次开发环境配置流程,希望为有定制化开发需求的用户提供实用、可靠的参考。

准备工作

在搭建 DolphinScheduler 开发环境之前请确保你已经安装以下软件:

  • Git
  • JDK: v1.8.x (注意DolphinScheduler3.1.9只能安装jdk v1.8.x不能升级)
  • Maven: v3.5+
  • Node: v16.13+ (dolphinScheduler 版本低于 3.0, 请安装 node v12.20+)
  • Pnpm: v6.x(注意DolphinScheduler3.1.9只能安装Pnpm v6.x不能升级)

打开pom.xml文件

使用idea打开pom.xml文件,作为项目打开。 在.idea目录下找到workspace.xml,在PropertiesComponent属性下增加下面这一行。 "dynamic.classpath": "true"

下载ZooKeeper并解压

在 ZooKeeper 的目录下新建 Data文件夹。

将 conf 目录下的 zoo_sample.cfg 文件复制一份,重命名为 zoo.cfg,修改其中数据的配置,如下:

dataDir路径设置为刚刚新建的Data文件夹目录。

然后启动服务,运行 ./bin/zkServer.cmd

修改数据库配置

打开dolphinscheduler-bom模块的pom文件修改数据库配置。

使用postgresql不用修改,使用mysql则需要修改。将MySQL的依赖中的test改为compile右上角的Maven要记得点击进行更新。

创建数据库并初始化

安装mysql,推荐使用8.0.16+。

创建完数据库后进行初始化。如下图所示,将文件中的sql语句复制出来在数据库上执行初始化。

配置MySQL

配置dolphinscheduler-alertdolphinscheduler-apidolphinscheduler-masterdolphinscheduler-workerapplication.yaml文件和logback-spring.xml文件,把postgresql改为mysql配置并修改日志级别。

例如dolphinscheduler-master配置mysql如下所示:

例如dolphinscheduler-master修改日志级别,以及在logback-spring.xml文件中修改如下所示:

修改模块配置

修改dolphinscheduler-ui模块的 package.json

为了避免版本冲突,打开dolphinscheduler-ui模块的package.json文件,去除所有^符号。

启动后端服务和前端服务

我们需要启动三个服务,包括MasterServerWorkerServerApiApplicationServer

  • MasterServer :在Intellij IDEA中执行 org.apache.dolphinscheduler.server.master.MasterServer中的main方法,并配置VM Options -Dlogging.config=classpath:logback-spring.xml -Ddruid.mysql.usePingMethod=false -Dspring.profiles.active=mysql
  • WorkerServer :在Intellij IDEA中执行 org.apache.dolphinscheduler.server.worker.WorkerServer中的mai方法,并配置VM Options -Dlogging.config=classpath:logback-spring.xml -Ddruid.mysql.usePingMethod=false -Dspring.profiles.active=mysql
  • ApiApplicationServer :在Intellij IDEA中执行 org.apache.dolphinscheduler.api.ApiApplicationServer中的main方法,并配置VM Options -Dlogging.config=classpath:logback-spring.xml -Dspring.profiles.active=api,mysql

打开运行配置,打开添加虚拟机选项然后输入上述命令并确定,即可完成配置。

最后在dolphinscheduler-ui目录下运行如下命令,安装前端依赖并运行前端组件:

运行起来后就会看见端口,浏览器打开即可看到网页。

原文链接:blog.csdn.net/qq_42838399...

相关推荐
企业老板ai培训15 小时前
破解中小企业AI变现难:2026年企业AI培训与陪跑行业趋势深度报告,为何从‘陪跑’到‘变现’才是关键?
大数据·人工智能
aax121345316 小时前
VOC 集群治理工程实操|美丽蓝天绿岛项目 RTO 工艺选型、管控方案与申报要
大数据·数据库·人工智能
海纳百川·纳海川16 小时前
数字化升级,让废品回收更简单高效
大数据·微信小程序·小程序
IvorySQL16 小时前
PG 日报|优化缓冲区批量扫描,降低多套接字并发竞争
数据库·人工智能·postgresql·开源·区块链
前端工作日常16 小时前
我学习到的Java中domain和dto区别
java·后端
码农学院17 小时前
基于Spring Boot的跨境电商多语言订单管理系统架构设计
java·大数据·spring boot
技术小结-李爽18 小时前
【工具】pom文件的<packaging>
java·maven
l1564694818 小时前
突围!图文混合知识库难以解析,Kimi-K3 原生视觉架构深耕知识工作,DMXAPI 统一接口,缩短项目开发周期
java·大数据·开发语言
QN1幻化引擎18 小时前
两个 AI 互相“创造自己“:Dalin X × Dalin L 自创造闭环全记录
大数据·人工智能
布吉岛的石头19 小时前
Java 程序员第 45 阶段11:网关统一路由大模型接口,配合 Nacos 配置治理,灰度路由:基于Nacos元数据实现大模型服务灰度发布与权重路由
java·服务发现