hadoop 配置格式化

ws_developer 2015-11-01 12:00:50

配置完Hadoop的几个文件格式化后没有创建tmp

...全文

130 3 打赏收藏转发到动态举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

水的只能学 2015-11-09

打赏
举报

回复

看下你的dhfs的配置是生成tmp目录么

Edocevol 2015-11-02

打赏
举报

回复

tmp不是程序创建的，是你自己手动创建的

Edocevol 2015-11-02

打赏
举报

回复

不要用tmp，这个文件名容易出错，换成其他的就好，前提是自己手动在Hadoop安装目录下创建

Apache Ambari是一种基于Web的运维工具，支持Apache Hadoop集群的自动化部署、管理和监控。Ambari目前已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop和Hcatalog等。 Ambari使用Ganglia收集度量指标，用Nagios支持系统报警，当需要引起管理员的关注时（比如，节点停机或磁盘剩余空间不足等问题），系统将向其发送邮件。本课程主要讲解Ambari工具的使用，主要涉及Ambari的安装部署、在Ambari下自动化部署一套hadoop3.x集群、在Ambari下扩容hadoop集群节点、在Ambari下添加Hive、hbase、spark等服务，以及如何实现hadoop集群中服务的自动化管理，还介绍了Ambari下如何进行故障告警和故障通知功能。本课程采用Centos7.x版本，Ambari版本为Ambari2.7.x，hadoop版本为HDP3.1(hadoop3.x)。 1、Ambari的工作原理与架构2、安装与部署Ambari3、通过Ambari部署一个Hadoop3.x集群4、通过Ambari扩容hadoop集群节点5、通过Ambari在hadoop集群中新增hive/hbase/tez服务组件6、通过Ambari在hadoop中新增spark计算引擎7、通过Ambari管理hadoop集群中的各种组件和服务8、通过Ambari修改hadoop集群各个组件配置参数9、在Ambari平台配置监控告警、并设置通知策略

Hadoop的重新格式化 Hadoop进行多次的格式化（hdfs namenode-format），会导致找不到datanode结点。原因每次格式化后，名称结点的clusterID（集群ID）会被新建，而数据结点的clusterID还是原来的，造成名称结点和...

如果想要格式化失败或者想要重新格式化，请删除配置文件中配置的 hadoop_repo 整个文件夹 2.启动在Hadoop文件中使用命令，sbin/start-all.sh 关闭Hadoop的命令则为 sbin/stop-all.sh 启动之后除jps进程之外，还有...

hadoop namenode格式化错误以及启动不了解决方案

hadoop搭建过程中需要进行格式化，而在进行文件配置过程中难免会出错，导致格式化后集群不能正常启动，想要重新格式化，删掉hadoop-2.10.1目录下的tmp文件夹: rm -rf tmp hadoop版本因人而异，之后重新...

Hadoop生态社区

20,808

社区成员

4,690

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章