datanode已经启动但是文件夹data文件夹下没有current

crazyywb 2018-07-31 06:34:04

去看进程显示datanode已经启动文件夹也有但是里面没有current 启动时还出了WARNING: /root/apps/hadoop-3.0.3/logs does not exist. Creating. namenode开启后文件夹正常

...全文

1457 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

首先明确以下，我的问题不同于多数问题（统一启动集群时，datacode 无法启动的问题。）如标题所示，本文问题所指：《成功启动datanode (hadoop-daemon.sh start datanode). 也成功生成 文件夹 /root/hdpData/data/. 但是没有生成 current文件夹》。也就是这个datanode 并没有加入到Namenode 同个集群我的环境：配置机器: A(namenode),/root/hdpData/name/current/* 成...

云服务器搭建Hadoop集群DataNode下没有current文件夹 搭建过程遇到情况说明：购买云服务器搭建Hadoop集群和VM虚拟机搭建不一样在于像服务器有公网IP和内网IP，所以在配置hosts文件的时候本机hostname绑定内网IP，其他hostname绑定公网IP，即：内网IP地址你的hostname 公网IP地址其他hostname 通俗讲就是： bigdata111配置hosts bigdata111内网IP bigdata111 bigdata112公网IP bigdata112

首先，我们再配置好hadoop后，利用 ./bin/hdfs namenode -format 格式化一下namenode，再 $ ./sbin/start-dfs.sh $ jps 开启之后，发现没有datanode，按照网上的方法，却发现我的tmp/dfs/data下面没有任何文件，而tmp/hdfs/name/下面有current，所以很是苦恼。后来查询日志得知logs/下： vim ...

打开usr/hadoop/hdfs/name，发现里面有current文件夹，但usr/hadoop/hdfs/data下空空如也。期间并无报错，然后用start-dfs.sh再次启动Hadoop，也没有报错，但用jps一看，datanode还是没启动起来。把usr/hadoop/tmp整个文件夹删除，再把usr/hadoop/hdfs/name下的文件也全部删除，再次运行。我又想到是不是SSH的问题，我使用的是免密登录，检查一番之后发现也并无异常。意思是我的datanode根本没有生成日志。

Hadoop启动时，没有启动DataNode1、起缘2、原因3、解决办法3.1 删除 dfs 文件夹（dfs文件夹中没有重要的数据）3.2 复制 clusterID（dfs文件夹中有着重要的数据）4、总结 1、起缘有时候Hadoop没关闭就格式化NameNode，经常会出现没有启动 DataNode 的情况 2、原因当我们使用 hadoop namenode -format 格式化 NameNode 时，会在 NameNode 数据文件夹（这个文件夹为自己配置文件中 dfs.name.dir 的路径）

1,258

社区成员

1,168

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章