关于hadoop集群搭建

hao难懂 2019-09-03 10:10:55
搭建集群配置hdfs-site.xml文件时,可以只配置hdfs的副本数量,不配置secondary namenode所在的IP和端口吗,如果这样的话,那它在什么位置
...全文
171 3 打赏 收藏 转发到动态 举报
写回复
用AI写文章
3 条回复
切换为时间正序
请发表友善的回复…
发表回复
samme2019 2019-09-25
  • 打赏
  • 举报
回复
etc/hdfs-site.xml

<property>
<name>dfs.replication</name>
<value>1</value>
<description>副本个数,默认配置是 3,应小于 datanode 机器数量</description>
</property>
配置副本个数

secondary namenode 可以不配置,这个是用来设置主从关系的,没有配置的话,就是单点配置
RivenDong 2019-09-03
  • 打赏
  • 举报
回复
可以指定NameNode节点的名字空间
<property>
<name>dfs.ha.namenodes.mycluster</name>
<value>nn1,nn2</value>
</property>
后面可以设置远程调用的地址和端口,例如:
<property>
<name>dfs.namenode.http-address.mycluster.nn1</name>
<value>master001:50070</value>
</property>
<property>
<name>dfs.namenode.http-address.mycluster.nn2</name>
<value>master002:50070</value>
</property>
4qw 2019-09-03
  • 打赏
  • 举报
回复
hadoop的部分属性配置都是有默认值的,如果你不设置就会按照默认值执行,具体的情况,你可以看下hadoop的启动脚本,以及那些默认项

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧