ELFK集群搭建

叱咤少帅（少帅）

领域专家: 前端开发技术领域

2023-01-13 02:06:15

课时名称	课时知识点
ELFK集群搭建	ELFK集群搭建

...全文

158 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

kafka是一款分布式消息发布和订阅的系统，具有高性能和高吞吐率。它最初由LinkedIn公司开发，之后成为Apache项目的一部分。Kafka是一个分布式的，可划分的，冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据。本课程详细讲解原理，以及集群搭建，使用Python/Java操作Kafka、并采用Prometheus监控Kafka，结合Grafana绘制出Kafka的监控大盘。之前有报名过《ELK/ELFK企业PB级日志系统实战》的同学建议学习本门课程温馨提示：课件在最后一节(课堂总结) 可以打包下载

ELFK集群部署

本文记录基于 Docker 容器化技术将 Elasticsearch 集群搭建 + ELFK 数据传输链路打通过程。

ELFK集群环境下，Logstash 组件所在节点的/etc/logstash/conf.d目录下，不需要创建system.conf配置文件，即Logstash不需要收集系统日志，因为系统日志将由filebeat收集后发送给Logstash。（安装filebeat后，Logstash会创建filebeat.conf配置文件获取filebeat传来的数据）。filebeat配置filebeat基本命令#启动 filebeat#-e：输出到标准输出，禁用syslog/文件输出#-c：指定配置文件。

本文主要详细阐释了如何部署ELFK + zookeeper +kafka 集群，希望对你有帮助！

少帅的课程社区_NO_1

1

社区成员

265

社区内容

发帖

与我相关

我的任务

linux 技术论坛（原bbs）广东省·深圳市

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章