误删了hadoop下logs的所有日志

泽米 2016-04-25 07:38:03

好像是不能跑程序了，不知道结果会是怎样，请问有什么解决办法？

...全文

707 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

alinly 2016-04-26

打赏
举报

回复

删除掉运行日志,不影响mapreduce运行. 为了安全,可以设置删除,是移动到回收站.

一、问题记录：在一次启动集群的时候，Hadoop安装目录下的所有文件夹（除了logs和data）都不见了，确定不是误删，因为当时用SecureCRT时出现了与平时不同的内容，当时没有在意，所有没有留下错误信息。然后查日志，里面根本没有内容。还有防火墙是关闭的。之后重新安装的Hadoop。二、hadoop 50070 无法访问问题解决汇总转载无法访问问题解决汇总我的问题是只有历史服务器有问题...

Hadoop Distributed File System，简称HDFS，是一个Hadoop分布式文件系统。1）NameNode（老板）：负责数据存在什么位置，整个数据的存储情况。2）DataNode：负责数据具体存在哪，存的什么信息。3）2NN（秘书）：备份，辅助NameNode工作，防止NameNode出bug导致整个集群的瘫痪。Yet Another Resource Negotiator简称YARN ，另一种资源协调者，是Hadoop的资源管理器（主要管理CPU和内存两大组件。

引子文章涵盖了hadoop框架的三个组成架构各自的优化方法,涉及存储,计算,故障排除等多个方面的具体调优内容,先后解决HDFS,MapReduce,Yarn的常见问题,最终结合小文件给出了Hadoop综合调优. 1 HDFS调优 1.1 核心参数 1.1.1 NameNode内存 Hadoop2.x系列,NN内存默认2000M,根据服务器(以4G为例)的3/4来配: hadoop-env.sh文件中配置:HADOOP_NAMENODE_OPTS=-Xmx3072m Hadoop3.x系列,had

1.在conf/hadoop-env.sh文件中增加：export JAVA_HOME=/home/Java/jdk1.62. 在conf/core-site.xml文件中增加如下内容：fs.default.namehdfs://localhost:9000hadoop.tmp.dir/home/hdfs/tmp3. 在conf/hdfs-site.xml中增加如下内容：dfs.replic...

hadoop分布式框架搭建一、Hadoop的三种运行模式（启动模式） 1.1、单机模式（独立模式）（Local或Standalone Mode） -默认情况下，Hadoop即处于该模式，用于开发和调式。 -不对配置文件进行修改。　　-使用本地文件系统，而不是分布式文件系统。　　-Hadoop不会启动NameNode、DataNode、JobTracker、TaskTracker等守护进程，Map()和Reduce()任务作为同一个进程的不同部分来执行的。　　-用于对MapReduce程序的逻辑进行调

1,261

社区成员

1,169

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章