rocketMQ 使用过程中遇到CPU定时波动，是什么原因？

zhuzhuzhu101 2023-03-02 15:09:26

...全文

493 回复打赏收藏转发到动态举报

写回复

回复

切换为时间正序

请发表友善的回复…

发表回复

本文记录了一次排查Java服务CPU使用率低但负载高的问题，通过分析发现线程上下文切换频繁和线程数量过多是主要原因。问题源于RocketMQ SDK的轨迹回传模块和消费者线程池配置。解决方案包括设置消费者线程数和优化轨迹回传机制。

本文分享RocketMQ调优心得。调优历程包括查阅资料、撸源码、配置优化。最终参数调优涉及RocketMQ、JVM、Linux、Netty等配置。如JVM选用G1回收器，Linux主从同步用异步，Netty关闭Recycler池等。调优需关注磁盘、内存、IO、CPU等指标。

博客分析了一次CPU使用率低但负载高的问题，发现是由于RocketMQ消费者使用LinkedBlockingQueue导致的。线程数过多（每个消费者创建20个线程）和轨迹回传模块的poll操作导致频繁上下文切换。优化方案包括设置消费者线程数和考虑升级RocketMQ版本以利用其优化的轨迹回传机制。

本文深入剖析RocketMQ服务在阿里云环境下遭遇的高Load问题，揭示了线程数过多及频繁上下文切换的根源，提供了针对性的优化策略，包括合理设置消费者线程数和升级SDK版本。

本文聚焦RocketMQ生产环境硬件选型，涵盖CPU核心数与主频权衡、内存容量规划及ECC选用、SSD类型（NVMe/SATA）与RAID 10配置、XFS文件系统优化、万兆网络带宽估算等关键技术点。强调页缓存优于大堆内存、避免混部高负载服务、禁止HDD使用，并给出中型集群（峰值20万TPS）的可落地配置清单。

RocketMQ开发者

69

社区成员

72

社区内容

发帖

与我相关

我的任务

其他企业社区

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章