hadoop datanode为什么只出现一次，再次输入jps就不出datanode节点了

qq_36717538 2016-12-12 06:49:00

datanode为什么只出现一次，再次输入jps就不出datanode节点了，什么原因呢？

...全文

520 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

解决Hadoop伪分布式集群没有datanode节点问题

也是进入这个目录，只不过namenode中的name文件在datanode是变为了data文件，即/tmp/dfs/data/current。当用start-dfs.sh和start-yarn.sh后，在slave节点(从节点)中用jps命令查看进程。有时候可能发现没有Datanode，即只有两项(第一项和最后一项)。clusterID替换掉datanode的clusterID就可以了。然后打开VERSION，把namenode的。打开，记录namedode下的。

在输入jps命令后，可能会出现无法启动DataNode的情况，如图。可能原因1：可能因为多次格式化NameNode会重新生成新的ClusterId（集群ID），而原来的DataNode内data文件下的VERSION文件内的ClusterId还是原来的ClusterId，所以就会出现与NameNode的ClusterId不匹配。解决方法：找到存放VERSION的路径我的是： data/hadoop/hdfs/name/current/ 和 data/hadoop/hdfs/data

问题描述：主节点jps出现datanode 从次节点jps没有datanode。原因可能是多次进行格式化format出现的值不对位。解决方案：选择jps未出现的datanode的虚拟机，进行操作。第一步：停止hadoop： stop-all.sh 第二步：删除tmp下的文件，： cd ./tmp/ ll rm -rf dfs/ 第三步：格式化HDFS： hdfs namenode -format 第四步：重启hadoop： start-all.sh ...

有时候我们start-dfs.sh启动了hadoop但是发现datanode进程不存在一、原因当我们使用hadoop namenode -format格式化namenode时，会在namenode数据文件夹(这个文件夹为自己配置文件中dfs.name.dir的路径)中保存一个current/VERSION文件，记录clusterID，datanode中保存的current/VERSION文件中的c...

4,436

社区成员

17,460

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章