IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> 【CentOS7+ Ambari 2.7.4 + HDP 3.1.4】搭建数据仓库 -> 正文阅读

[大数据]【CentOS7+ Ambari 2.7.4 + HDP 3.1.4】搭建数据仓库

旧文拾起,来自某源。可惜当前已被商业化,只能用历史版本。

搭建本地仓库:

1. 下载软件包

Ambari 2.7.4:http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.7.4.0/ambari-2.7.4.0-centos7.tar.gz

HDP-3.1.4.0:

HDP:http://public-repo-1.hortonworks.com/HDP/centos7/3.x/updates/3.1.4.0/HDP-3.1.4.0-centos7-rpm.tar.gz
HDP-UTILS:http://public-repo-1.hortonworks.com/HDP-UTILS-1.1.0.22/repos/centos7/HDP-UTILS-1.1.0.22-centos7.tar.gz
HDP-GPL:http://public-repo-1.hortonworks.com/HDP-GPL/centos7/3.x/updates/3.1.4.0/HDP-GPL-3.1.4.0-centos7-gpl.tar.gz

准备 repo 配置文件.?

dwtest 为 ambari 部署机 hostname

ambari 服务本地仓库配置:ambari.repo ,位于 /etc/yum.repos.d/

#VERSION_NUMBER=2.7.4.0-118
[ambari-2.7.4.0]
#json.url = http://public-repo-1.hortonworks.com/HDP/hdp_urlinfo.json
name=ambari Version - ambari-2.7.4.0
baseurl=http://dwtest/ambari_repo/centos7/2.7.4.0
gpgcheck=1
gpgkey=http://dwtest/ambari_repo/centos7/2.7.4.0/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

hdp 本地仓库配置:ambari-hdp-1.repo

[HDP-3.1-repo-1]
name=HDP-3.1-repo-1
baseurl=http://dwtest/ambari_repo/hdp/HDP/centos7/3.1.4.0-315

path=/
enabled=1
gpgcheck=0
[HDP-3.1-GPL-repo-1]
name=HDP-3.1-GPL-repo-1
baseurl=http://dwtest/ambari_repo/hdp/HDP-GPL/centos7/3.1.4.0-315

path=/
enabled=1
gpgcheck=0
[HDP-UTILS-1.1.0.22-repo-1]
name=HDP-UTILS-1.1.0.22-repo-1
baseurl=http://dwtest/ambari_repo/hdp/HDP-UTILS/centos7/1.1.0.22

path=/
enabled=1
gpgcheck=0

2. 起动一个本地 HTTP 服务来提供仓库访问 url

安装并开启 Apache HTTP 服务

yum install httpd -y
systemctl enable httpd
systemctl start httpd

确保 /var/www/html 目录存在,没有的话创建。

mkdir -p /var/www/html

?创建 HDP,HDF 子目录

cd /var/www/html
mkdir hdp  hdf

解开下载的软件包:

cd /var/www/html/ambari_repo
tar -zxvf  ../ambari-2.7.4.0-centos7.tar.gz    -C .
tar -zxvf  ../HDP-3.1.4.0-centos7-rpm.tar.gz   -C ./hdp
tar -zxvf  ../HDP-GPL-3.1.4.0-centos7-gpl.tar.gz  -C ./hdp
tar -zxvf  ../HDP-UTILS-1.1.0.22-centos7.tar.gz   -C ./hdp

四、主节点安装 ambari server

1,使用刚才配置好的本地仓库,直接 yum 命令安装。

yum install ambari-server -y

2,查看 ambari server 状态

systemctl status ambari-server 

● ambari-server.service - LSB: ambari-server daemon
   Loaded: loaded (/etc/rc.d/init.d/ambari-server; bad; vendor preset: disabled)
   Active: inactive (dead)
     Docs: man:systemd-sysv-generator(8)

看到 ambari server 已成功安装了。

4,配置 ambari server

执行命令

ambari-server setup

回答选择项,其中 JDK 选择 “”Custom“”,给出系统安装目录。https://docs.cloudera.com/HDPDocuments/Ambari-2.7.4.0/bk_ambari-installation/content/set_up_the_ambari_server.html

Ambari-server 安装完成

浏览器访问 ambari-server 服务:

http://dwtest:8080

默认用户名 / 密码为:admin/admin

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-07-04 22:59:50  更:2022-07-04 23:02:12 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年5日历 -2024/5/20 0:16:28-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码