IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> 配置单体hadoop -> 正文阅读

[大数据]配置单体hadoop

配置依赖环境

hadoop是Apache的项目,所以依赖java。

有两个必须安装的:

  • ssh
  • Java

安装Java

如果是yum安装的话,那么执行

yum list|grep java*

看:

java-1.8.0-openjdk.x86_64                1:1.8.0.312.b07-1.el7_9       installed

这样就可以了。

如果Java不在的话:

yum install java-1.8.0-openjdk.x86_64 // 或者其他版本

添加path

hadoop是个很奇怪的东西,不能直接:

JAVA_PATH = ${JAVA_PAHTH}

所以需要先找一下JAVA_PATH(测试一下JAVA_PATH是否可用)

正常情况下,执行

cd /usr/lib/jvm

里面能找到可用的JDK。

然后选择:

export JAVA_HOME=/usr/lib/jvm/jre-openjdk
source ~/.bashrc

然后测试一下:

$JAVA_HOME/bin/java -version

如果有数据的话,那么会:

[root@VM-4-6-centos jvm]# $JAVA_HOME/bin/java -version
openjdk version "1.8.0_312"
OpenJDK Runtime Environment (build 1.8.0_312-b07)
OpenJDK 64-Bit Server VM (build 25.312-b07, mixed mode)

安装hadoop并解压

获取安装路径,选择二进制安装(binary),不是源码(resource)

推荐的话,文件安装在:/opt

程序安装在:/usr/local

cd /opt
wget https://dlcdn.apache.org/hadoop/common/hadoop-3.3.2/hadoop-3.3.2.tar.gz

然后解压

tar -xzvf hadoop-3.3.2.tar.gz
mv hadoop-3.3.2 hadoop
mv hadoop /usr/local
  • 修改命名的原因,是让hadoop容易找

修改配置文件

vim /usr/local/hadoop/etc/hadoop/hadoop-env.sh

两个说法:

  • 如果你不写入JAVA_PATH,那么就需要在配置文件写入
  • 如果写入,那么预先从配置文件找,如果找不到用JAVA_PATH

然后:如果想直接执行hadoop,需要执行:

$ cd /usr/local/hadoop
$ ./bin/hadoop version

出现这么一个设置,即为单体hadoop配置成功

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-03-13 21:52:47  更:2022-03-13 21:55:27 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 7:26:08-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码