直播课kafka(第3天)-2022年4月22日

2022-04-22 07:14:47 1k 阅读 AI 写同款 · GEO 优化AI 选题数据监测一键分发 ›

云上自动伸缩实战：从业务指标驱动到三层协同策略自动伸缩不是简单的资源增减，而是基于业务容量预测的系统性工程。其核心原理在于将用户可感知的性能劣化（如API错误率飙升、消息积压）映射为可监控、可决策的技术信号，从而实现从‘被动救火’到‘主动水位调控’的跃迁。技术价值体现在稳定性提升与成本优化的双重收益——避免无效扩容导致的资源浪费，同时防止缩容激进引发的请求丢失。典型应用场景覆盖电商大促、在线考试、短视频推荐等高波动业务，尤其适用于正被‘扩容后无效’‘缩容丢请求’困扰的云原生架构团队。本文聚焦业务指标驱动的伸缩体系构建，深入解析Kafka lag、HTT 阅读详情

计划是每周二-周六晚上进行直播课，中间可能因为身体或者其他原因缺席，关注社区公告！

每晚八点钟我们不见不散，加群关注直播信息！

距离我的这本书《kafka修炼之道》写完已经有几天了，其实这个是我写的教案，就是为了开展直播课使用的。

章节列表如下：

一、kafka基础入门
- 1.1.白话消息队列
- 1.2.消息传递模型
- 1.3.典型应用场景一
- 1.4.典型应用场景二
- 1.5.kafka简单介绍
- 1.6.kafka核心概念解析 < == 直播课进度
- 1.7.搭建kafka单机版
- 1.8.kafka3中zk替代方案
二、生产级集群安装
- 2.1.linux安装JDK
- 2.2.linux主机与ip解析
- 2.3.linux新建用户
- 2.4.linux开放防火墙端口
- 2.5.最大打开文件句柄数
- 2.6.集群主机之间免密登录
- 2.7.zookeeper集群安装(脚本)
- 2.8.kafka集群安装部署(脚本)
- 2.9.kafka3无需zk的集群安装
- 2.10.集群可用性验证及配置
- 2.11.kafka集群可靠性配置
三、生产者客户端
- 3.1.本章阅读说明
- 3.2.图解kafka生产者
- 3.3.数据生产可靠性
- 3.4.保证消息顺序性
- 3.5.生产者Java实现
- 3.6.自定义拦截器
- 3.7.自定义序列化器
- 3.8.自定义分区器
- 3.9.幂等与事务处理
四、消费者客户端
- 4.1.消费者组与数据积压
- 4.2.消费者Java实现
- 4.3.消费偏移与可靠性
- 4.4.分区再均衡
- 4.5.线程池与消费者组
- 4.6.消费者拦截器
- 4.7.自定义反序列化器
五、SpringBoot集成kafka
- 5.1.整合集成kafka客户端
- 5.2.生产者同步异步分区拦截
- 5.3.生产者事务处理
- 5.4.KafkaListener详解
- 5.5.Header及sendTo
- 5.5.监听器模式及偏移量提交
- 5.3.消费监听器的异常处理
- 5.6.JSON序列化日期问题处理
六、kafka安全认证
- 6.1.用户名密码PLAIN认证
- 6.2.SCRAM认证
- 6.3.Kerberos认证(撰写中)
七、kafka运维配置管理
- 7.1.topic管理命令
- 7.2.KafkaTool带界面管理工具
- 7.3.LogiKM企业级监控管理(撰写中)
附录
- linux虚拟机集群的搭建