关于如何通过代码得到Hadoop TaskTracker Status的问题

szdxdzxxxj 2016-05-03 09:55:28

在hadoop的50060页面可以查看到各个TaskTracker的状态信息，如Task Attempts等，请问我该如何通过代码得到TaskTracker的信息？或者说，在Hadoop的org.apache.hadoop.mapreduce包中，接口TaskAttemptContext中的getProhress（）方法应该如何重写？希望得到大神的帮助，谢谢！

...全文

2994 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

Hadoop TaskTracker 自我检测机制机制：通过TaskTracker在启动时循环检测，设计时通过捕获异常来完成状态检测 |-->TaskTracker.run() |-->initialize(); |-->if (shouldStartHealthMonitor(this.fConf)) |-->startHealthMonitor(t

今天启动hadoop机器，但是其中一个节点的TaskTracker始终启动不起来。http://forum.hadoop.tw/viewtopic.php?p=149#p149中里面提到NameNode与DataNode的namespaceID 不同，于是我查看了两者的namespaceID，发现相同。我仔细看了一下如下日志： 2012-11-14 20:37:43,461 IN...

这里是一张客户端的流程图（手贱乱画的） 1 负责向JobTracker定期的发送心跳消息。消息中有说明是否要申请新的任务，并接收Job下达的任务。 2 如果jobTracker下达了task任务要执行，则执行该任务。 # 先看看类的注释跟类结构 * TaskTracker is a process that starts and tracks MR Tasks * in a

1 规划新添加的hadoop节点的角色和配置 1.1 角色 slave: 即datanode节点或者tasktracker节点 1.2 配置主机名：hadoop03 IP: 192.168.88.173 hadoop用户：xiaoyu 2. 部署新的节点 2.1 安装操作系统 2.3 关闭不必要的服务建议只保留以下服...

TaskTracker是Map/Reduce中执行任务的服务。 1、有如下线程为其提供支撑： 1）提供一组RPC服务（TaskUmbilicalProtocol）的1个Listener线程与默认10个Handler线程； 2）提供另一组RPC服务（MapOutputProtocol）的1个Listener线程与默认2个Handler线程； 3）TaskTracker主线程：主线程运行off

2,245

社区成员

699

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章