| |
|
开发:
C++知识库
Java知识库
JavaScript
Python
PHP知识库
人工智能
区块链
大数据
移动开发
嵌入式
开发工具
数据结构与算法
开发测试
游戏开发
网络协议
系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程 数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁 |
-> 大数据 -> Hadoop集群缺少进程初步解决方案 -> 正文阅读 |
|
[大数据]Hadoop集群缺少进程初步解决方案 |
没有类似截图,口头说的详细点 按我这方法应该能解决大部分问题,如果还不得我也无能为力 这个方法就是把hadoop重置到格式化之前 因为你没格式化之前,上面三项都是不存在的,你格式化后才会出现 通常守护进程缺失或者自己死亡就是因为你格式化次数太多,导致出错,用这个方法可以把hadoop重置到格式化之前 hadoop配置文件中 core-site.xml有一项配置是这么写的 这里配置是为了指定hadoop的临时文件夹
hdfs-site.xml有两项是这么写的 第一段的意思是:定义DFS的namenode在本地文件系统的位置 第二段的意思是:定义DFS的datanode在存储数据块时在本地文件系统的位置
注意:这里的tmp,name,data都是指定到hadoopdir下的,如果有进程缺失,可以尝试以下操作 (路径根据自己写的在哪就是哪) 第一步:停止所有进程(stop-all.sh) 第二步:停止所有进程后,去认真检查以下配置文件: hadoop-env.sh core-site.xml hdfs-site.xml mapred-site.xml yarn-site.xml slaves 因为如果你配置文件里打错东西,在 property , name , value 这些属性名称没有错时,他不一定会报错,而是继续执行,如果用不了他也不会提示 第三步:删除所有节点的hadoopdir rm -rf /home/hadoopdir (这一步一定要在停止所有守护进程,且检查所有配置文件都没错之后) 路径是根据自己写的在哪就是哪,假设我写 hdfs/data hdfs/name hdfs/tmp 那我就直接把hdfs这个目录删了 是直接删除整个目录,目录里有data,tmp,name,不是一个一个删 第四步:重新格式化 在确保已经把上面三个配置项文件存放的目录全部删除之后,重新格式化 第五步:启动所有守护进程 如果还是缺失进程或进程自动死亡,请重新根据上面的步骤试试,如果还不得,我也无能为力,因为我就是一大学生,不是什么大佬 |
|
|
上一篇文章 下一篇文章 查看所有文章 |
|
开发:
C++知识库
Java知识库
JavaScript
Python
PHP知识库
人工智能
区块链
大数据
移动开发
嵌入式
开发工具
数据结构与算法
开发测试
游戏开发
网络协议
系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程 数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁 |
360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 | -2024/11/24 12:01:47- |
|
网站联系: qq:121756557 email:121756557@qq.com IT数码 |