IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> CDH azkaban-3.75.2安装教程 -> 正文阅读

[大数据]CDH azkaban-3.75.2安装教程

关注微信公共号:小程在线

关注CSDN博客:程志伟的博客

安装准备:

azkaban-exec-server-0.1.0-SNAPSHOT.tar.gz
azkaban-web-server-0.1.0-SNAPSHOT.tar.gz

create-all-sql-0.1.0-SNAPSHOT.sql

一、首先配置mysql

进入mysql:mysql -u root -p

  1. CREATE DATABASE azkaban;
  2. show databases;
  3. CREATE USER 'azkaban'@'%' IDENTIFIED BY 'azkaban';
  4. GRANT SELECT,INSERT,UPDATE,DELETE ON azkaban.* to 'azkaban'@'%' WITH GRANT OPTION;
  5. FLUSH PRIVILEGES;
  6. USE azkaban;
  7. source /home/sofe/azkaban-3.75.2/create-all-sql-0.1.0-SNAPSHOT.sql

二、生成 keystore 和 truststore 文件

解压azkaban-web-server-0.1.0-SNAPSHOT.tar.gz安装包,

改名为azkaban-web-server

在其中创建key目录,将生成的3个文件放到key目录下

参考:CDH Azkaban 生成keystore和truststore文件_程志伟的博客-CSDN博客

三、编辑conf/azkaban.properties

要写绝对路径,根据自己的实际路径修改。host填写自己的实际地址。

web.resource.dir=/home/soft/azkaban-3.75.2/azkaban-web-server/web

user.manager.xml.file=/home/soft/azkaban-3.75.2/azkaban-web-server/conf/azkaban-users.xml

lockdown.create.projects=false

lockdown.upload.projects=false

project.temp.dir=/home/soft/azkaban-3.75.2/azkaban-web-server/temp

executor.global.properties=/home/soft/azkaban-3.75.2/azkaban-web-server/conf/global.properties

executor.port=12321

jetty.port=8081

jetty.use.ssl=true

jetty.ssl.port=8443

jetty.maxThreads=25

jetty.keystore=/home/soft/azkaban-3.75.2/azkaban-web-server/key/keystore

jetty.password=azkaban

jetty.keypassword=azkaban

jetty.truststore=/home/soft/azkaban-3.75.2/azkaban-web-server/key/truststore

jetty.trustpassword=azkaban

jetty.connector.stats=true

mysql.host=本机地址

编辑 vi log4j.properties

log4j.appender.server.File=/home/soft/azkaban-3.75.2/azkaban-web-server/logs/azkaban-webserver.log

创建一个logs目录

在azkaban-web-server 创建mkdir logs

?四、exec-server 安装

解压:tar -zxvf azkaban-exec-server-0.1.0-SNAPSHOT.tar.gz

重命名:mv azkaban-exec-server-0.1.0-SNAPSHOT.tar.gz azkaban-exec-server

修改conf/azkaban.properties

host填写自己的本机地址。

default.timezone.id=Asia/Shanghai

azkaban.webserver.url=https://本机地址:8443

azkaban.jobtype.plugin.dir=/home/soft/azkaban-3.75.2/azkaban-exec-server/plugins/jobtypes

azkaban.project.dir=/home/soft/azkaban-3.75.2/azkaban-exec-server/projects

mysql.host=本机地址

executor.port=12321

executor.connector.stats=true

executor.maxThreads=50

executor.flow.threads=30

executor.global.properties=/home/soft/azkaban-3.75.2/azkaban-exec-erver/conf/global.properties

修改 conf/log4j.properties

将其中的存放日志的路径由相对路径改为绝对路径,logs目录手动创建

log4j.appender.server.File=/home/soft/azkaban-3.75.2/azkaban-exec-server/logs/azkaban-execserver.log

在azkaban-exec-server目录下创建一个logs目录

mkdir logs

五、启动

1. 在azkaban-exec-server目录下:bin/start-exec.sh

2. 在mysql下执行:

select * from executors;

# 这里必须手动把active的值设置为1

MariaDB [azkaban]> UPDATE executors SET active = 1 WHERE id = 1;

3. 在azkaban-web-server目录下执行: bin/start-web.sh

4. 查看进程

在azkaban-web-server目录下执行:jps

六、登陆

输入地址和端口号登陆,账号,密码

?需要安装文件的在下方留言

?

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-03-15 22:37:16  更:2022-03-15 22:38:54 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 8:55:23-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码