一、jdk环境
从官方下载jdk，版本1.8及以上即可
给个地址：jdk8
二、IP地址和主机名映射
将主机名与IP地址映射，可以用主机名进行任务分发或文件传输以及其他工作
- 使用hostname命令 ，查看本机的主机名；
- 使用ip addr命令 ，查看本机的ip地址；
- 编辑/etc/hosts文件 ，在末尾追加ip与主机名的映射；
$:hostname //查看主机名称
//主机名可在/etc/hostname文件中修改
$:ip addr //查看IP地址
$:vim /etc/hosts
//追加内容：ip为自个儿的ip地址
192.168.1.101 master
三、生成公私钥授权
$:ssh-keygen -t rsa
//授权：
$:cd ~/.ssh
$:cat id_rsa.pub >> authorized_keys
四、下载解压Hadoop
- Hadoop官方链接
- hadoop3.3.1下载链接
- 复制到/usr/app目录下
cp ./hadoop-3.x.y.tar.gz /usr/app/
- 解压
tar -zvxf hadoop-x.y.z.tar.gz
五、配置Hadoop环境变量
vim /etc/profile
//添加环境
export HADOOP_HOME=/usr/app/hadoop-x.y.z
export PATH=$ HADOOP_HOME/bin:$PATH
六、修改Hadoop配置文件
cd $HADOOP_HOME/etc/hadoop/ //进入Hadoop配置文件文件夹
1.vim hadoop-env.sh
//jdk安装路径
export JAVA_HOME=/usr/java/jdk1.8.0_171
2.core-site.xml
3.hdfs-site.xml
4.workers
注意：Hadoop3.0以上版本将slaves改为workers
七、关闭防火墙
如果不关闭，访问不了web UI界面
Ubuntu和Centos的关闭请自行查询
八、初始化
cd $HADOOP_HOME/bin
hdfs namenode -format
九、启动
cd $HADOOP_HOME/sbin
./start-dfs.sh
十、Yarn配置启动
配置好yarn之后
cd $HADOOP_HOME/sbin
./start-yarn.sh
|