集群启动没有Datanode"/>
Hadoop集群启动没有Datanode
本人搭建的伪分布式集群,Hadoop集群启动没有Datanode,一开始以为是配置问题,检查了发现没什么问题,后来发现是Datanode与Namenode之间的ClusterID不一致导致的。
可能造成的原因:频繁的格式化namenode
环境:VMWARE+Centos7+Hadoop3.1.1
解决:进入到你hadoop安装目录里面的/data/dfs文件夹中
cd /opt/module/hadoop-3.1.1/data/dfs/
这个有三个文件夹,分别是namenode,datanode和2NN的文件夹
先进入cd cd name/current/ 文件夹,然后cat VERSION(注意这里VERSION要大写)
cd name/current/cat VERSION
然后复制这里的ClusterID
然后回到/dfs文件夹,进入到data/current,然后cat VERSION
cd data/current/cat VERSION
同理,复制DataNode的ClusterID
进行对比,发现两个ID确实不一样
此时vim VERSION,将DataNode的ClusterID改成NameNode 的 ClusterID,保存,退出
stop-all.sh 停止集群
reboot 重启,完美解决!
更多推荐
Hadoop集群启动没有Datanode
发布评论