怎么样解决HIve跑批大约一个星期后会变得很慢的问题

flyaga 2019-07-22 11:52:25
HIve跑批大约一个星期后会变得很慢,需要重启CDH Hadoop集群后,跑批才能够正常,请问是什么原因造成这样的问题?需要怎么样才能够跑批正常?谢谢!

红框处是重启了CDH Hadoop集群,重启后跑批时间正常


开始以为是Hdfs临时目录下文件太多的问题,开启定时程序删除了3天前的临时文件,但没有效果,问题还是存在。
...全文
149 回复 打赏 收藏 转发到动态 举报
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧