IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> Centos7Hadoop伪分布式 -> 正文阅读

[大数据]Centos7Hadoop伪分布式

参照Hadoop包里面的share的doc的离线文档


  1. 解压 重命名 环境变量

    1.	tar -zxvf 解压包名(jdk的包,hadoop包)
    2.	mv 文件名 重命名
    3.	vi /etc/profile(环境变量对所有用户有效)vi ~/.bash_profile(只对当前用户有效)
            export JAVA_HOME=/usr/local/src/jdk
            export HADOOP_HOME=/usr/local/src/hadoop
            export PATH=$JAVA_HOME/bin:$PATH
            export PATH=$HADOOP_HOME/bin:$PATH
            export PATH=$HADOOP_HOME/sbin:$PATH
    4.	刷新环境变量	source ~/.bash_profile
  2. hadoop-env.sh

    1.	进入到hadoop/etc/hadoop
    2.	vi hadoop-env.sh 
        修 export JAVA_HOME=/usr/local/src/jdk
  3. core.site.xml

    vi core.site.xml 
             <property>
            	<name>fs.defaultFS</name>
            	<value>hdfs://master:9000</value>
        	</property>
            <property>
                <name>hadoop.tmp.dir</name>
           	    <value>/usr/local/src/hadoop/tmp</value>
        	</property>          
  4. hdfs-site.xml

    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
  5. mapred-site.xml

    cp mapred-site.xml.template  mapred-site.xml
        <property>
            <name>mapreduce.framework.name</name>
            <value>yarn</value>
        </property>
  6. yarn-site.xml

    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>
  7. 格式化namenode并启动

    1.	hdfs namenode -format
    2.	cd hadoop/sbin	
        start-all.sh/stop-all.sh
    3.	查看namenode和resourcemanager
        主机IP:50057
        主机IP:8088

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2021-08-06 09:53:50  更:2021-08-06 09:54:41 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年5日历 -2024/5/17 15:31:45-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码