hadoop.tmp.dir修改不了

csorlee 2013-07-31 04:23:36

很多hadoop的文档都提到，最好把hadoop.tmp.dir修改一下，
缺省这个变量是指向tmp目录下面，由于linux的tmp目录不安全，因此容易造成文件丢失。

可是我在core-site.xml里面加这个变量，重启都会自动把它删除掉。

请问intel的发行版，怎么修改hadoop.tmp.dir变量啊？

...全文

952 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

cxj3000 2013-08-17

打赏
举报

回复

需要到通过Intel Manager UI上去改，并且改完之后点“配置到集群”按钮,直接改文件无效

hadoop配置文件修改先进入hadoop配置文件所在路径: cd /usr/local/src/hadoop-2.6.1/etc/hadoop 修改slaves vim slaves 修改core-site.xml vim core-site.xml fs.defaultFS hdfs://192.168.43.10:9000 #主机和端口 hadoop.tmp.dir file:/usr/local/src/hadoop-2.6.1/tmp 修改mapred-site.xml 先拷贝一份: cp mapred-site.xml.templa

解压并移动解压tar文件之后，移动文件夹到/usr/local/hadoop文件夹 tar -zxf hadoop-xxxx.tar mv hadoop-xxxxx /usr/local/hadoop 配置文件修改如下配置文件 core-site.xml fs.defaultFS hdfs://sparkproject1:9000 hadoop.tmp.dir /usr/local/data/tmp hdfs-site.xml

Hadoop 3.x中引入了一些重要的功能和优化，因此很有必要掌握Hadoop3.x。本课程通过老师的讲解，你可以熟悉Hadoop3.x环境搭建、伪分布式部署、集群部署。课程目录：1、Hadoop3.x环境基础环境构建2、Hadoop3.x伪分布式部署3、Hadoop3.x伪分布式部署补充4、Hadoop3.x HA集群部署5、Hadoop3.x HA集群部署补充

hadoop.tmp.dir的目录默认指向的是：/tmp/hadoop-${USERNAME} 这样会有个问题，系统重启时会自动删除/tmp目录下的文件，导致你之前对hadoop做的很多操作都被删除了，需要重新再来，比如你想hdfs导入的文件会都被删除。这是你需要修改 ${hadoop_home}/etc/hadoop/core-site.xml文件，添加一个名字为"hadoop.tmp.dir...

{user.name} ,此时有个问题就是 NameNode 会将 HDFS 的元数据存储在这个/tmp目录下，如果操作系统重启了，系统会清空 /tmp 目录下的东西，导致NameNode元数据丢失，是个非常严重的问题，所有我们应该修改这个路径。：这是 HDFS 的文件系统镜像，记录了整个文件系统命名空间的状态。hadoop.tmp.dir 配置的是Hadoop临时目录，比如HDFS的NameNode数据默认都存放这个目录下，查看*-default.xml 等默认配置文件，就可以看到很多依赖。

594

社区成员

254,047

社区内容

发帖

与我相关

我的任务

其他技术论坛（原bbs）

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章