一.IP和主机名称配置
? 1.配置ip
vim /etc/sysconfig/network-scripts/ifcfg-ens33
?
2.配置主机名称
vim /etc/hostname
?
3.主机名称的映射
vim /etc/hosts
?
二.安装jdk
1.查找并卸载系统自带的jdk
rpm -qa | grep -i java | xargs -n1 rpm -e –nodeps
2.上传压缩包
?
3.解压到指定的module文件夹
tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/
4.配置jdk环境变量
cd /etc/profile.d/
vim my_env.sh
?
5.验证是否成功
?
三.安装hadoop
1.解压到指定的module文件
tar -zxvf hadoop-3.1.3.tar.gz -C /opt/module/
2.配置hadoop环境变量
vim /etc/profile.d/my_env.sh
?
3.验证是否成功
?
四.配置伪分布式
1.hadoop-env.sh
更改jdk环境变量和hadoop的安装目录
vim hadoop-env.sh
?
2.core-site.xml
vim core-site.xml
?
3.hdfs-site.xml
vim hdfs-site.xml
?
4.mapred-site.xml
vim mapred-site.xml
?
5.yarn-site.xml
vim yarn-site.xml
?
6.配置workers
vim /opt/module/hadoop-3.1.3/etc/hadoop/workers
?
7.格式化namenode
hadoop namenode -format
8.启动hadoop
start-all.sh
注：在此之前先输入cd /opt/module/hadoop-(版本号)/sbin/
输入 ll
?
?在第一排后面加：
对于start-dfs.sh和stop-dfs.sh文件，添加下列参数：
HDFS_DATANODE_USER=root
HDFS_DATANODE_SECURE_USER=hdfs
HDFS_NAMENODE_USER=root
HDFS_SECONDARYNAMENODE_USER=root??
对于start-yarn.sh和stop-yarn.sh文件，添加下列参数：
YARN_RESOURCEMANAGER_USER=root
HADOOP_SECURE_DN_USER=yarn
YARN_NODEMANAGER_USER=root
?用vim四个文件都要输入参数。
?（错误示范）
9.检查集群
?