社区
Hadoop生态社区
帖子详情
yarn管理的MR,读取hbase表时,map个数和reduce个数如何决定?
西红小柿
2017-06-13 05:59:35
背景:hbase表时预分区20个分区;
问题:
yarn管理的MR,读取hbase表时,map个数和reduce个数如何决定?
...全文
1262
2
打赏
收藏
yarn管理的MR,读取hbase表时,map个数和reduce个数如何决定?
背景:hbase表时预分区20个分区; 问题: yarn管理的MR,读取hbase表时,map个数和reduce个数如何决定?
复制链接
扫一扫
分享
转发到动态
举报
写回复
配置赞助广告
用AI写文章
2 条
回复
切换为时间正序
请发表友善的回复…
发表回复
打赏红包
无所谓斗争
2018-06-12
打赏
举报
回复
map数要看你的文件大小和分块的设置大小,默认好像是128M,reduce个数默认是1,这个没深入了解,一般默认的就满足使用了。
barte5156
2018-05-08
打赏
举报
回复
默认时通过hbase表的region的个数
Hadoop生态社区
20,808
社区成员
4,690
社区内容
发帖
与我相关
我的任务
Hadoop生态社区
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
复制链接
扫一扫
分享
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
加入社区
获取链接或二维码
近7日
近30日
至今
加载中
查看更多榜单
社区公告
暂无公告
试试用AI创作助手写篇文章吧
+ 用AI写文章