社区
Hadoop生态社区
帖子详情
hadoop中是否可以控制tasktracker的数量?
深夜代码党
2012-03-10 09:32:24
rt。是已经将hadoop部署好并且运行起来之后,我是否可以在代码中设置我现在需要的tasktracker的数量?比如我的集群上有10台机一直在工作,我现在开了一个任务只想让中间5台机工作,该怎么实现?别跟我说shutdown之后改配置文件重启。。。
同样,datanode的数量是否也可以这样控制?
...全文
111
5
打赏
收藏
hadoop中是否可以控制tasktracker的数量?
rt。是已经将hadoop部署好并且运行起来之后,我是否可以在代码中设置我现在需要的tasktracker的数量?比如我的集群上有10台机一直在工作,我现在开了一个任务只想让中间5台机工作,该怎么实现?别跟我说shutdown之后改配置文件重启。。。 同样,datanode的数量是否也可以这样控制?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
5 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
SVKING
2012-03-18
打赏
举报
回复
只知道,这个是可以设置的。具体的不会啊
huoqie115
2012-03-17
打赏
举报
回复
可以设置,系统使用一个默认值,这个值是可以通过调用一个类的函数中设置。
liutengfeigo
2012-03-16
打赏
举报
回复
CSDN太浅了?
春风剑客
2012-03-12
打赏
举报
回复
期待答案
深夜代码党
2012-03-11
打赏
举报
回复
怎么没人回答啊。。
Hadoop
权威指南(
中
文版)2015上传.rar
从
Hadoop
URL
中
读取数据 通过FileSystem API读取数据 写入数据 目录 查询文件系统 删除数据 数据流 文件读取剖析 文件写入剖析 一致模型 通过 distcp并行拷贝 保持 HDFS 集群的均衡
Hadoop
的归档文件 使用
Hadoop
归档...
大数据开发技术.pdf
3.DataNode 它负责管理连接到节点的存储(一个集群
中
可以有 多个节点) 。每个存储数据的节点运行一个 datanode 守护进程。 4.ResourceManager(Job
Tracker
) Job
Tracker
负责调度 DataNode 上的工作。每个 ...
Hadoop
入门和大数据应用
Hadoop
入门和大数据应用视频教程,该课程主要分享
Hadoop
基础及大数据方面的基础知识。 讲师介绍:翟周伟,就职于百度,
Hadoop
技术讲师,专注于
Hadoop
&大数据、数据挖掘、自然语言处理等领域。2009年便开始利用...
大数据平台常见面试题.pdf
NameNode
Task
Tracker
对应于 DataNode DataNode 和 NameNode 是针对数据存放来⽽⾔的 Job
Tracker
和
Task
Tracker
是对于 MapReduce 执⾏⽽⾔的 mapreduce
中
⼏个主要概念,mapreduce 整体上可以分为这么⼏条执⾏...
hadoop
添加删除datanode及
task
tracker
hadoop
添加删除datanode及
task
tracker
首先: 建议datanode和
task
tracker
分开写独立的exclude文件,因为一个节点即可以同时是datanode和
task
tracker
,也可以单独是datanode或
task
tracker
。 1、删除...
Hadoop生态社区
20,808
社区成员
4,690
社区内容
发帖
与我相关
我的任务
Hadoop生态社区
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
复制链接
扫一扫
分享
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章