使用apache原生的hadoop有哪些可以使用的集群监控工具

kazoroth 2017-08-06 07:43:06
新人对大数据只是有一点点听说,但受命建设大数据分析平台,只好强行学习安装,预算是2个主控节点、8个数据节点、2台etl服务器、2台万兆光纤交换机,目前学习阶段,虚拟环境没有使用cdh 也没有使用ambari这些软件,用过cdh,发现一些软件版本好旧,也有教材说cdh性能不够好,我是不喜欢,我是直接一个一个的装hadoop生态圈的软件,已经安装了hadoop2.8.1集群、hive2.3.0、postgres9.6.3、spark2.2.0,并实现了hive on spark,之后可能还会安装zookeeper、hue、storm之类的,hbase不好说装不装,毕竟系统需求只需要分析级速度,不需要毫秒级速度,先看hive和spark是否够用,但这样独立的安装软件,又涉及那么多台服务器,以后监控维护和投产是个问题,可以补上哪些集群监控工具呢?另外如果使用docker可以实现多台服务器的部署吧,对docker也不懂,只是听说。
...全文
332 回复 打赏 收藏 转发到动态 举报
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧