apache dophinscheduler 3.1.0 编译
源码编译
从github下载apache dophinscheduler 3.1.0的源码,解压
编译
mvn clean install -Prelease
跳过测试、注释、格式检查, IntelliJ IDEA 编译需加单引号 windows下命令行输入
mvn clean install -Prelease -Dmaven.test.skip=true -Dcheckstyle.skip=true -Dmaven.javadoc.skip=true
编译报错
可能是镜像的问题,解决方案,修改pom文件 D:\github\dolphinscheduler-3.1.0\pom.xml
找到spotlesss-maven-plugin插件,然后注释掉, 重新编译源码。
mvn clean package -Prelease -Dmaven.test.skip=true -Dcheckstyle.skip=true -Dmaven.javadoc.skip=true
生成tar包所在路径如下所示:
dolphinscheduler-3.1.0/dolphinscheduler-dist/target
Standalone部署
使用root 用户部署, 启动standalone-server
/opt/DS/apache-dolphinscheduler-3.1.0-bin/bin/dolphinscheduler-daemon.sh start standalone-server
/opt/DS/apache-dolphinscheduler-3.1.0-bin/bin/dolphinscheduler-daemon.sh stop standalone-server
/opt/apache-dolphinscheduler-3.1.0-bin/bin/dolphinscheduler-daemon.sh status standalone-server
查看日志
tail -f /opt/DS/apache-dolphinscheduler-3.1.0-bin/standalone-server/logs/dolphinscheduler-standalone.log
登录页面
http://192.168.3.201:12345/dolphinscheduler/ui/
账号密码
admin/dolphinscheduler123
使用内置的H2数据库, 数据质量的规则列表查询有问题,所以使用mysql作为数据库。配置mysql数据库、hadoop、spark的环境变量
修改文件 /opt/DS/apache-dolphinscheduler-3.1.0-bin/bin/env/dolphinscheduler_env.sh
export DATABASE=${DATABASE:-mysql}
export SPRING_PROFILES_ACTIVE=${DATABASE}
export SPRING_DATASOURCE_DRIVER_CLASS_NAME=com.mysql.cj.jdbc.Driver
export SPRING_DATASOURCE_URL=jdbc:mysql://192.168.3.212:3306/dolphinscheduler3?characterEncoding=utf-8
export SPRING_DATASOURCE_USERNAME=root
export SPRING_DATASOURCE_PASSWORD=xxxxxexport HADOOP_HOME=${HADOOP_HOME:-=/home/hadoop/hadoop/hadoop-2.8.5}
export HADOOP_CONF_DIR=${HADOOP_CONF_DIR:-/home/hadoop/hadoop/hadoop-2.8.5/etc/hadoop}
export SPARK_HOME2=${SPARK_HOME2:-/home/hadoop/spark/spark-2.4.8-bin-hadoop2.7}
拷贝mysql-connector-java 到standalone-server的lib目录
/opt/dolphinscheduler/apache-dolphinscheduler-3.1.0-bin/standalone-server/libs/standalone-server
启动服务即可!
apache dophinscheduler 3.1.0 编译相关推荐
- Apache CarbonData 1.5.0编译及安装
2019独角兽企业重金招聘Python工程师标准>>> 一.编译环境描述 OpenStack创建五个虚拟机,其中1个主节点(hostname为bigdatamaster),4个从节点 ...
- Apache Kylin v2.5.0正式发布,开源分布式分析引擎
文章转载自开源中国,作者 Apache Kylin 社区 日前,Apache Kylin 社区宣布,Apache Kylin v2.5.0 正式发布. Apache Kylin 是一个开源的分布式分析 ...
- apache hadoop 2.4.0 64bit 在windows8.1下直接安装指南(无需虚拟机和cygwin)
工作须要.要開始搞hadoop了,又是大数据,自己感觉大数据.云.仅仅是ERP.SOAP风潮之后与智能地球一起诞生的概念炒作. 只是Apache是个奇妙的组织.Java假设没有它也不会如今如火中天.言 ...
- netbeans java9_Java 开发新选择?Apache NetBeans IDE 9.0 备受好评
Apache NetBeans 9.0 目前已发布 Beta 版本,离正式版本越来越近.9.0 版本的主要目标囊括 Oracle 捐赠的大量代码,以及提供 Java 9 和 10 支持. Apache ...
- Java 开发新选择?Apache NetBeans IDE 9.0 正式发布
自 2016 年 10 月 Oracle 向 Apache 软件基金会(Apache Software Foundation,ASF)提供了主流的软件开发环境以来,ASF 就开始致力于 NetBean ...
- mac下hadoop 2.6.0编译native library
本文中的所有路径请根据个人情况修改. 编译好的native library见个人资源:[http://download.csdn.net/detail/tterminator/9565597] 一.为 ...
- Apache Kudu 1.15.0的分布式集群部署
目录 1. 部署规划 2. 部署要求 2.1 硬件要求 2.2 软件要求 2.3 安装依赖 3. 从源码编译(kudu1上操作) 3.1 安装Red Hat Developer Toolset 3.2 ...
- 恭喜!Apache DophinScheduler 再登 GitHub Java Trending 榜单
点击蓝字 关注我们 本周,Apache DophinScheduler 再度登上 GitHub Java Trending 榜单第四位,并在本月 GitHub Java Trending 榜单上保持第 ...
- Apache License Version 2.0 (Apache 2.0 开源协议)
Apache 2.0 开源协议的核心内容是以保护和尊重原作者的著作权为主要目的.对使用,复制,修改,商用不做过多限制,但必须包含原著的License信息. 公司或项目在使用 Apache Licens ...
最新文章
- uni-app h5页面左上角出现“取消“字眼解决办法
- 推荐一篇文章,感觉学完Iterator模式后应当读一读
- swing LayoutManager 和多态
- 结巴分词jieba添加自定义词典
- [Redux/Mobx] 说说redux的优缺点分别是什么?
- Java虚拟机JVM的内存管理
- Spyder里面好像不能用汉字
- 30 分钟学会 Flex 布局
- 他曾经复读才考上三本,如今让华为开出 201 万年薪(其实还拒绝了 360 万 offer)...
- 用友NC任意文件上传漏洞复现
- 2016红帽年度创新大奖榜单揭晓
- Jupyter Notebooks学习分享
- 基金指数温度怎么算_投资指数基金的奇技淫巧——指数温度实战详解
- 掌握这些电脑知识,你会玩得很无耻
- 甲骨文战略收购一览表
- 高等数学竞赛题解析教程P26 - 例1.52(浙江2008竞赛题)
- C语言编译出现一个警告,16种C语言编译警告(Warning)类型的解决方法
- Ubuntu+OpenCV学习汉字点阵
- python测试开发django-122.bootstrap模态框(modal)学习
- 过山车之星 Planet Coaster Mac