Hadoop集群启动没有Datanode

编程入门 行业动态 更新时间:2024-10-27 10:23:10

Hadoop<a href=https://www.elefans.com/category/jswz/34/1771240.html style=集群启动没有Datanode"/>

Hadoop集群启动没有Datanode

本人搭建的伪分布式集群,Hadoop集群启动没有Datanode,一开始以为是配置问题,检查了发现没什么问题,后来发现是Datanode与Namenode之间的ClusterID不一致导致的。

可能造成的原因:频繁的格式化namenode

环境:VMWARE+Centos7+Hadoop3.1.1

解决:进入到你hadoop安装目录里面的/data/dfs文件夹中

cd /opt/module/hadoop-3.1.1/data/dfs/

这个有三个文件夹,分别是namenode,datanode和2NN的文件夹

先进入cd cd name/current/ 文件夹,然后cat VERSION(注意这里VERSION要大写)

cd name/current/cat VERSION

 然后复制这里的ClusterID

 

 然后回到/dfs文件夹,进入到data/current,然后cat VERSION

cd data/current/cat VERSION

同理,复制DataNode的ClusterID

进行对比,发现两个ID确实不一样

此时vim VERSION,将DataNode的ClusterID改成NameNode 的 ClusterID,保存,退出

 stop-all.sh 停止集群

reboot 重启,完美解决!

更多推荐

Hadoop集群启动没有Datanode

本文发布于:2024-02-12 00:40:46,感谢您对本站的认可!
本文链接:https://www.elefans.com/category/jswz/34/1684672.html
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系,我们将在24小时内删除。
本文标签:集群   Hadoop   Datanode

发布评论

评论列表 (有 0 条评论)
草根站长

>www.elefans.com

编程频道|电子爱好者 - 技术资讯及电子产品介绍!