CDH里的kafka 集群启动报错，zookeeper也是启动失败

薄荷不太凉 2022-06-29 16:03:38

kafka的报错

zookeeper的报错

查2181端口也没有启动

...全文

368 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

本文记录了一次CDH集群中Kafka Broker无法启动的问题排查过程，详细分析了问题原因，发现是由于堆内存设置过小导致，并给出了调整配置后的解决办法。

本文档详细记录了两个CDH集群（Cluster1和Cluster2）的规划与安装过程，包括操作系统、JDK、MySQL、CM和CDH的版本信息。在安装CM时，遇到Agent检测不到信号的问题，解决方案是检查并释放9001和9000端口。在安装CDH过程中，列举了一系列常见问题及解决方法，如Zookeeper数据查看、Kafka ID修改、HDFS错误处理、Hive数据库连接授权等。此外，还涉及了配置文件修改、文件上传下载权限设置等操作。

在CDH集群中，将Kafka和Flume整合，启动Kafka正常，但启动Flume报错。检查发现Flume状态正常，查看Zookeeper日志有报错。报错原因不明，网上加长心跳检测时间的方法无效。推测此报错由Zookeeper管理的其他组件引起，解决对应组件报错即可。

文章详细描述了在CDH6.3.2集群上下载Flink并制作parcel包的过程，包括下载资源、修改配置、构建parcel、在CDH中分发激活服务以及解决启动过程中遇到的HBASE_CONF_DIR未设置、版本兼容性等问题。最终因Zookeeper版本不兼容导致Flink服务无法稳定启动，提出了可能的解决方案。

本文解决在CDH集群中使用Kafka创建Topic时遇到的broker不可用错误，通过调整ZookeeperRoot目录配置，成功创建Topic。

高性能WEB开发

25,980

社区成员

4,366

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章