hadoop mapreduce的日志输出到哪里

winnerX 2013-07-23 06:34:34
在写mapreduce程序时使用到了log4j,但是找不到log输出的文件，不知道在哪个目录，有人注意过这个问题吗
...全文
1664 2 打赏 收藏 转发到动态 举报
写回复
用AI写文章
2 条回复
切换为时间正序
请发表友善的回复…
发表回复
幸运小侯子 2013-10-16
  • 打赏
  • 举报
 回复
恩恩，是在hadoop 安装目录logs/下的userlogs文件夹下，在不同的节点上有自己的jobid号的文件夹日志。
winnerX 2013-07-23
  • 打赏
  • 举报
 回复
找到了，原来在hadoop日志输出文件夹里的userlogs文件夹中，由于我是在web界面中中找的，所以找不到
1. 搜狗日志查询分析； 2. 运营商关于用户基站停留数据统计； 3. 根据气象数据中心的数据进行温度统计； Hadoop
选题：搜狗日志查询分析 (MapReduce+Hive综合实验） 前提条件： 安装好hadoop2.8.0 安装好HQL 安装好Hive 安装好eclipse 选题要求： 解压数据源，并上传到hdfs，保存的目录以个人学号区分，176为我的学号 创建hive...
MapReduce分布式计算平台编程示例
3 Hadoop MapReduce平台使用 5 3.1 streaming介绍 5 3.2 C语言Map-Reduce程序示例 6 3.2.1计算任务 6 3.2.2 Mapper算法设计 7 3.2.3 Reducer算法设计 8 3.2.4 作业提交命令 9 3.3 shell Map-Reduce程序示例 9 3.3.1...
Java大数据培训学校全套教程-50）Hadoop与MapReduce最入门
hdfs常用命令，WordCount程序详解，Shuffle过程详解，WordCount程序结果分析，Hadoop,HDFS,MapReduce,NameNode和DataNode,yarn,ResourceManager,NodeManager的概念等让大家对Hadoop和MapReduce编程打下好的基础。...
Hadoop权威指南 第二版(中文版)
Hadoop的I/O、MapReduce应用程序开发；MapReduce的工作机制；MapReduce的类型和格式；MapReduce的特性；如何构建Hadoop集群，如何管理Hadoop；Pig简介；Hbase简介；Hive简介；ZooKeeper简介；开源工具Sqoop，最后还...
Hadoop权威指南（中文版）2015上传.rar
日志的MapReduce模型 关于Cascading 字段、元组和管道 操作 Tap类，Scheme对象和Flow对象 Cascading实战 灵活性 Hadoop和Cascading在ShareThis的应用 总结 在Apache Hadoop上的TB字节数量级排序 使用Pig和Wukong来...
Hadoop生态社区

20,808

社区成员

4,690

社区内容

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区，致力于有Hadoop，hive，Spark，Hbase，Flink，ClickHouse，Kafka，数据仓库，大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今

加载中

查看更多榜单
社区公告
暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章