20,811
社区成员
发帖
与我相关
我的任务
分享Hadoop-2.4.1 TestIo读比写还要慢的问题 急求
组网环境描述：
1台NameNode + 3台DataNode, 每台机器使用16G内存
现象：
1.通过TestIo测试用例写4个100G的文件, 速率能够达到300MB/S, 在写的过程中不断的观察datanode的负载, 确实每台机器都处于高负载的工作状态下。
2.但是----通过TestIo测试用例读4个100G的文件, 速度仅能够达到80MB/s, 在读的过程中发现只有一台datanode的负载高, 其他两台没有工作
求各位大神给点招, 谢了。
1台NameNode + 3台DataNode, 每台机器使用16G内存
现象：
1.通过TestIo测试用例写4个100G的文件, 速率能够达到300MB/S, 在写的过程中不断的观察datanode的负载, 确实每台机器都处于高负载的工作状态下。
2.但是----通过TestIo测试用例读4个100G的文件, 速度仅能够达到80MB/s, 在读的过程中发现只有一台datanode的负载高, 其他两台没有工作
求各位大神给点招, 谢了。
...全文
请发表友善的回复…
发表回复
呆萌-鱼 2015-01-07
- 打赏
- 举报
自己顶一下, 在线等啊
