Apache DolphinScheduler(2.x和3.x版本) 本地环境搭建教程一览 ...

海哥  金牌会员 | 2024-5-27 09:47:18 | 显示全部楼层 | 阅读模式
打印 上一主题 下一主题

主题 535|帖子 535|积分 1605

在灵敏变化的技能范畴,本地环境的搭建和调试对于软件开发的效率和效果至关重要。本文将具体先容怎样为Apache DolphinScheduler搭建一个高效的本地开发环境,包括2.x和3.x版本的设置方法。

无论您是初学者还是有履历的开发者,本指南都将资助您快速启动并运行,有效地进行本地代码调试。
依赖项


  • Mysql
  • ZooKeeper
说明

其他的 Git、Maven、JDK、Node等工具,这里不做具体安装说明。
注意Apache DolphinScheduler 2.x 版本使用 node v12.20 ,  3.x 版本使用 node v16.13+。
本地开发搭建更多的是为了方便调试代码,用于调试现有的逻辑,定位题目,学习源码等,如果有现成的测试环境,发起不要在本地在安装额外的Mysql等环境了,直接使用测试环境的 Mysql、ZK 等环境,那就跳过这一步今后看!
如果你没有测试环境,本地还是必要搭建 Mysql 和 ZooKeeper 的话,也非常简单。
安装 ZooKeeper

https://archive.apache.org/dist/zookeeper/zookeeper-3.6.3/

① 下载之后,解压到一个目录 ,在这个目录下新建 zkData、zkLog 文件夹。
② 将 Conf 目录下的 zoo_sample.cfg 文件,复制一份,重命名为 zoo.cfg,修改其中数据和日志的配置,如:
  1. dataDir=/data/zookeeper/data ## 此处使用绝对路径,具体路径根据实际情况
  2. dataLogDir=/data/zookeeper/datalog
复制代码
③ 运行 ./bin/zkServer.sh
安装Mysql

访问 https://dev.mysql.com/downloads/mysql/
Mac用户:

Windows 用户:

其他的,安装一直点Next即可。
安装完 Mysql 之后,必要初始化数据。
① 在Mysql中新建库,用于DolphinScheduler调用
  1. CREATE DATABASE dolphinscheduler DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
复制代码
② 新建DolphinScheduler用户,并赋予DolphinScheduler库权限
  1. CREATE USER 'dolphinscheduler'@'%' IDENTIFIED BY 'dolphinscheduler';
  2. GRANT ALL PRIVILEGES ON dolphinscheduler.* TO 'dolphinscheduler'@'%';
  3. CREATE USER 'dolphinscheduler'@'localhost' IDENTIFIED BY 'dolphinscheduler';
  4. GRANT ALL PRIVILEGES ON dolphinscheduler.* TO 'dolphinscheduler'@'localhost';
  5. FLUSH PRIVILEGES;
复制代码
③ 实行 SQL
在 Mysql 的 DolphinScheduler 库中实行 DolphinScheduler源码目录下的\*\*dolphinscheduler/dolphinscheduler-dao/src/main/resources/sql/dolphinscheduler_mysql.sql \*\*的文件,以此完成数据的初始化。
配置注册中心

修改 Zookepper 的配置信息
如果你使用的是本地的 ZK,配置默认就是 127.0.0.1:2181 ,这一步可以跳过,不必要修改。
如果你是用的是其他服务器的 ZK,修改下图中位置的连接信息即可。

启动后端

说明

这里呢,2.x 版本和 3.x 版本会有点不一样。如图:


在修改的时候,请注意找到对应的位置。
启动 API 服务

① 2.X 版本和 3.X 版本一样,在 dolphinscheduler-api 模块的 resources 下面,新增 yaml 文件 application-mysql.yaml
内容如下:注意修改成自己的 Mysql 连接信息
  1. spring:
  2.   datasource:
  3. <root level="INFO">
  4.   <appender-ref ref="STDOUT"/>
  5.   <appender-ref ref="APILOGFILE"/>
  6. </root>driver-class-name: com.mysql.cj.jdbc.Driver
  7. <root level="INFO">
  8.   <appender-ref ref="STDOUT"/>
  9.   <appender-ref ref="APILOGFILE"/>
  10. </root>url: jdbc:mysql://你的IP:3306/数据库?characterEncoding=UTF-8&allowMultiQueries=true&useSSL=false
  11. <root level="INFO">
  12.   <appender-ref ref="STDOUT"/>
  13.   <appender-ref ref="APILOGFILE"/>
  14. </root>username: 你的用户
  15. <root level="INFO">
  16.   <appender-ref ref="STDOUT"/>
  17.   <appender-ref ref="APILOGFILE"/>
  18. </root>password: 你的密码
  19. <root level="INFO">
  20.   <appender-ref ref="STDOUT"/>
  21.   <appender-ref ref="APILOGFILE"/>
  22. </root>hikari:
  23. <root level="INFO">
  24.   <appender-ref ref="STDOUT"/>
  25.   <appender-ref ref="APILOGFILE"/>
  26. </root>  connection-test-query: select 1
  27. <root level="INFO">
  28.   <appender-ref ref="STDOUT"/>
  29.   <appender-ref ref="APILOGFILE"/>
  30. </root>  minimum-idle: 5
  31. <root level="INFO">
  32.   <appender-ref ref="STDOUT"/>
  33.   <appender-ref ref="APILOGFILE"/>
  34. </root>  auto-commit: true
  35. <root level="INFO">
  36.   <appender-ref ref="STDOUT"/>
  37.   <appender-ref ref="APILOGFILE"/>
  38. </root>  validation-timeout: 3000
  39. <root level="INFO">
  40.   <appender-ref ref="STDOUT"/>
  41.   <appender-ref ref="APILOGFILE"/>
  42. </root>  pool-name: DolphinScheduler
  43. <root level="INFO">
  44.   <appender-ref ref="STDOUT"/>
  45.   <appender-ref ref="APILOGFILE"/>
  46. </root>  maximum-pool-size: 50
  47. <root level="INFO">
  48.   <appender-ref ref="STDOUT"/>
  49.   <appender-ref ref="APILOGFILE"/>
  50. </root>  connection-timeout: 30000
  51. <root level="INFO">
  52.   <appender-ref ref="STDOUT"/>
  53.   <appender-ref ref="APILOGFILE"/>
  54. </root>  idle-timeout: 600000
  55. <root level="INFO">
  56.   <appender-ref ref="STDOUT"/>
  57.   <appender-ref ref="APILOGFILE"/>
  58. </root>  leak-detection-threshold: 0
  59. <root level="INFO">
  60.   <appender-ref ref="STDOUT"/>
  61.   <appender-ref ref="APILOGFILE"/>
  62. </root>  initialization-fail-timeout: 1
复制代码
图示:

② 修改日志输出到控制台,在 dolphinscheduler-api 模块的 resources 下面,修改 logback-api.xml 文件。
  1. <root level="INFO">
  2.   <appender-ref ref="STDOUT"/>
  3.   <appender-ref ref="APILOGFILE"/>
  4. </root>
复制代码
图示:


③ 启动 API 服务 默认端口是:7080
配置 \_VM Options : \_-Dlogging.config=classpath:logback-api.xml -Dspring.profiles.active=mysql,api  把红色部分复制到
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

0 个回复

倒序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

海哥

金牌会员
这个人很懒什么都没写!

标签云

快速回复 返回顶部 返回列表