Hadoop 3.3.4 DataNode 起不来,报 Incompatible clusterIDs,求指点
-
如题,格式化 NameNode 之后启动集群,DataNode 日志里全是:
java.io.IOException: Incompatible clusterIDs in /home/hadoop/data/datanode: namenoode clusterID = CID-xxx, datanode clusterID = CID-yyy查到原因是重复 format 导致 NameNode clusterID 变了、DataNode 还留着旧 ID。我现在的做法是删掉所有 datanode 目录重新 format,但感觉每次都删数据太粗暴,有没有更优雅的办法?比如手动改 VERSION 文件里的 clusterID?
-
优雅方案就是把 DataNode 数据目录下
current/VERSION里的 clusterID 改成 NameNode 的新 ID,所有节点统一改一遍再 start-dfs.sh,数据不丢。删目录重 format 只在确认不需要旧数据时用。建议把 format 前先停集群写进操作手册,避免反复踩。