hadoop三个配置文件没起作用。

距离与美 2014-04-16 03:12:55

刚开始没发现在这个问题，最近启动hadoop后是处于安全模式，用fsck一看，结果还说副本数应为三个现在只有一个（因为我只有一个datanode现在），但是之前我已经在hdfs-site.xml设置里面设置未1了，我才意识到三个配置文件都没有起作用。
有没有类似问题的，

...全文

166 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

1 获取默认配置配置hadoop，主要是配置core-site.xml,hdfs-site.xml,mapred-site.xml三个配置文件，默认下来，这些配置文件都是空的，所以很难知道这些配置文件有哪些配置可以生效，上网找的配置可能因为各个hadoop版本不同，导致无法生效。浏览更多的配置，有两个方法: 1.选择相应版本的hadoop,下载解压后，搜索*.xml,找到co

通过了解hadoop各配置文件的含义，帮助理解job提交到yarn集群失败时的相关排查、以及job提交时相关配置参考。

1） hadoop的默认配置文件(jar包内部) core-default.xml: 默认的核心hadoop属性文件。该配置文件位于下面JAR文件中:Hadoop-common-2.2.0.jar hdfs-default.xml : 默认的HDFS属性配置文件，文件位于下面的JAR文件中：hadoop-hdfs-2.2.0.jar mapred-default.xml : 默认mapreduce属性配置文件，位于mapreduce-client-core-2.2.0.jar yarn

hadoop查看默认的配置文件 一、默认配置文件 默认的配置文件在 $HADOOP_HOME/share/hadoop（$HADOOP_HOME是取环境变量中hadoop的路径）进入到该目录下： cd $HADOOP_HOME/share/hadoop 有以下几个目录：默认配置文件就在红框中（common、hdfs、mapreduce、yarn） [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-aotAvBvx-1650980923111)(https://gitee

core-site.xml：核心配置文件，主要定义了我们的集群是分布式，还是本机运行hdfs-site.xml：分布式文件系统的核心配置决定了我们数据存放在哪个路径，数据的副本，数据的block块大小等等hadoop-env.sh : 配置我们jdk的home路径mapred-site.xml : 定义了我们关于mapreduce运行的一些参数 yarn-site.xml : 定...

1,092

社区成员

968

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章