IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> 大数据平台集群(3个节点的搭建) -> 正文阅读

[大数据]大数据平台集群(3个节点的搭建)

  1. 大数据平台集群(3个节点的搭建)通过克隆的方式搭建3个节点的集群;使用远程连接工具进行连接; (实验报告包括题目编写好一起提交)

(1)实验目的与原理

熟练虚拟机的克隆的使用。

理解集群的搭建需要的基础操作。

(2)实验内容与步骤

?????搭建基础linux平台,进行相关的设置;

?????克隆三个节点进行配置;

(3)主要仪器及耗材

笔记本电脑

(4)教学方式

案例教学法

(5)预习要求

预习Linux命令的相关知识点。

要求:认真编写,认真截图,认真截图 工作态度第一

  1. 安装基础linux系统平台,设置静态地址;截图

设置虚拟机的ip地址为静态状态,手动设置为192.168.64.130

  1. 安装jdk;安装mysql数据库;截图

安装jdk步骤

查看已经安装的jdk版本,使用rpm -e --nodeps命令将其卸载掉。

将jdk压缩包拖至/usr/local/java目录下,使用命令tar进行解压缩。

?

使用vi命令进入/etc/profile文件,配置环境变量。

用java -version命令检查jdk安装是否成功,出现jdk版本信息则安装成功。

安装mysql数据库

利用wget 命令,下载mysql的repo源

进行安装Mysql

安装完成后,重启MySQL服务,设置登陆密码

再次重启MySQL服务,设置Root账户远程连接密码,然后重启服务器 。

打开SQLyog验证ip地址为192.168.64.140的虚拟机的mysql数据库安装是否成功。

?关闭防火墙;截图

首先查看防火墙状态,然后使用systemctl stop firewalld.service命令关闭防火墙。

  1. 设置系统的时间同步;截图

设置统的时间同步,首先要安装ntp服务

使用ntpdate pool.ntp.org更新服务器上的时间

?克隆集群3个节点;并且设置他们的地址和机器名字;截图;

集群点1:hadoop1 ?ip地址:192.168.64.130

?

集群点2:hadoop2 ??ip地址:192.168.64.140

?

?

集群点3:hadoop3 ??ip地址:192.168.64.150

?

测试三个集群是否互相连通,使用多执行模式。一定要先将防火墙关闭。

Ping 192.168.64.130

Ping 192.168.64.140

Ping 192.168.64.150

?设置免密登录;截图

设置免密登录,首先要确保主机名称都设置好了,然后修改映射关系。

在三台主机的/etc/hosts文件中添加要互通的主机IP地址和主机名称。

?使用ssh-keygen命令在hadoop1上生成公钥和私钥

?使用ssh-keygen命令在hadoop2上生成公钥和私钥

?使用ssh-keygen命令在hadoop3上生成公钥和私钥

?相互告诉对方自己的公钥和秘钥

告诉hadoop1的公钥和秘钥

告诉hadoop2的公钥和秘钥

告诉hadoop3的公钥和秘钥

测试免密

测试hadoop1给hadoop2传文件,从hadoop1中传送文件ylp到hadoop2中,成功传送,且不需要输入密码,免密登录成功。

?测试hadoop2给hadoop3传文件,从hadoop2中传送文件ylp到hadoop3中,成功传送,且不需要输入密码,免密登录成功。

?测试hadoop1给hadoop3传文件,从hadoop1中传送文件ylp1到hadoop3中,成功传送,且不需要输入密码,免密登录成功。

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-03-15 22:37:16  更:2022-03-15 22:38:50 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/24 9:02:39-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码