博客内容涉及Hadoop集群在配置过程中遇到的问题及解决方案。主要问题是namenode与datanode之间的通信异常，可能原因是clusterID不一致或者节点间的防火墙未关闭。解决方法包括重新同步clusterID和关闭防火墙。对于clusterID不一致，建议删除所有节点的相关数据目录并重新格式化；对于防火墙问题，需要确保所有节点的防火墙都已关闭。
问题描述：
could only be written to 0 of the 1 minReplication nodes. There are 2 datanode(s) running and 2 node(s) are excluded in this operation.
解决方案：
原因有两种：
（1）namenode节点与其他datanode节点的VERSION中的clusterID的值不一致。
方法：删除所有节点（包括namenode）节点的hdfs-site.xml中dfs.namenode.name.dir中指定的文件夹即name和data文件夹，然后使用hadoop namenode –format命令重新格式化各个节点。
（2）有节点的防火墙未关闭
方法：使用命令：
systemctl stop firewalld.service
扫一扫
3013
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
