impala性能问题

春素小皙的酒壶 2020-11-26 12:07:39
有没有大佬了解以下情况:有一个集群8台服务器,每台机器的内存128g,都装了impalad和datanode,impala客户端在发送一条复杂的sql给节点1,sql里面用到的表是很大的。运算sql的时候看了一下每台机器的内存使用,发现并不是所有的机器都把内存使用上了,只是其中3台机器内存飙升,快要爆掉,其他的几台好像都没动静,照理来说,集群不是应该会有负载均衡的策略吗,想了解一下是什么情况,我个人认为会不会是数据文件只是在这三台服务器存储,那如何在写数据的时候数据文件均衡分布?
...全文
6730 1 打赏 收藏 转发到动态 举报
写回复
用AI写文章
1 条回复
切换为时间正序
请发表友善的回复…
发表回复
华为云数据 2021-03-03
  • 打赏
  • 举报
回复
可能是集群在建设时,并没有像预期的那样连在一起,这就导致工作中数据处理量集中在那三台服务器上

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧