hadoop 运行速度问题

tiandaochouqinatone1 2010-07-28 01:06:39
hadoop运行的速度,当处理一个小的文件的时候,速度还好,可是当处理一个几百兆的时候速度就很慢了!
...全文
160 4 打赏 收藏 转发到动态 举报
AI 作业
写回复
用AI写文章
4 条回复
切换为时间正序
请发表友善的回复…
发表回复
james二次元 2010-08-02
  • 打赏
  • 举报
回复
最好能量化你的问题,要考虑机器之间的开销的
  • 打赏
  • 举报
回复
不是正常的,虽然可以运行出来,但是我们是在完全分布式的情况下运行的,一个master,两个slave,这样的速度是很不正常的呢!
dalier149 2010-07-29
  • 打赏
  • 举报
回复
用HDFS了吗,是不是配置的问题,才一个文件,用hadoop体现不出优势才对
steptodream 2010-07-28
  • 打赏
  • 举报
回复
看现象 好像是正常的啊

2,163

社区成员

发帖
与我相关
我的任务
社区描述
Linux/Unix社区 UNIX文化
社区管理员
  • UNIX文化社区
  • 文天大人
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧