三台机器能够构建HA的hadoop集群吗 hadoop-2.6.0 64位版本

frank0501 2016-01-06 03:02:17

这是我设计的架构如图，理论上任意一台机器宕机，集群仍然可以正常工作，不知道这样是否可行。
求大神指导。

...全文

371 1 打赏收藏转发到动态举报

写回复

1 条回复

切换为时间正序

请发表友善的回复…

发表回复

frank0501 2016-01-06

打赏
举报

回复

这个是图，忘记帖了...

本次使用3台阿里云主机进行集群部署: ** 1. 版本 ** 组件版本备注及下载地址 Centos 7.2 64-bit lsb_release -a 命令查看操作系统版本file /bin/ls 命令查看操作系统位数 Hadoop hadoop-2.6.0-cdh5.15.1.tar 下载源码自行编译好的版本 jdk java version “1.8.0_45" h...

最近公司需要搭建一套基于hadoop-2.6.0-cdh5.16.2的环境，cdh5的官网也需要登陆，hadoop的压缩包也找了很久（下面提供网盘🔗），网上这个版本的部署参考资料很零散，没找到有哪一篇可以从头到尾一次性成功的，尝试了十多篇博客的部署方式，结合自己在部署过程中遇到的问题，整理了这一篇文章。

Hadoop-2.6.0集群搭建 1、用到的软件和IP设置： 1.1、jdk和hadoop版本： hadoop-2.6.0.tar.gz jdk-8u25-linux-x64.gz 1.2、统一用户名hadoop00 1.3、集群IP与主机名： 192.168.1.2 hadoop00 192.168.1.3 hadoop11 192.168.1.4 hadoop22 1

1.版本组件版本备注 centos centos7.2 JRE jdk-8u45-linux-x64.gz - hadoop hadoop-2.6.0-cdh5.15.1.tar.gz 自己通过源码编译的，具有压缩工具 zookeeper zookeeper-3.4.6.tar.gz 热切，yarn存储数据使用的协调服务 2.阿里云环境搭建具体步骤在这不详...

1.高可用简介 Hadoop 高可用 (High Availability) 分为 HDFS 高可用和 YARN 高可用，两者的实现基本类似，但HDFS NameNode 对数据存储及其一致性的要求比 YARN ResourceManger 高得多，所以它的实现也更加复杂。 HDFS的高可用实质是主备共享存储系统，不管是zookeeper还是QJM都是这个原理，一下是基于zookeeper的高可用集群搭建。 1.1 高可用整体架构 HDFS 高可用架构如下： HDFS 高可用架构主要由以下组件所构成： A

932

社区成员

652

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章