kafka lag积压180万+

  其他常见问题
内容纲要

概要描述


kafka的消费积压180万+
集群环境 4.8.4

详细说明


通过命令查看到lag积压180万+,并且还在持续增长:

./kafka-consumer-groups.sh --describe --bootstrap-server 172.22.39.7:9092 --group console-consumer-23651

file

而客户反馈落表数据没有影响,落表速度也没有减慢

查看到该topic一共被4个消费者组消费:

file

客户查看的是第一个console-consumer-30390的消费者组,console-consumer-****是kafka默认起的消费者组名称;另外3个消费者组正好对应4044上跑的streamjob:

file

这3个消费者组没有lag积压情况:
file

故认为前面发生积压的console-consumer-30390消费者组是客户手动起的一个消费者产生的,停掉即可

这篇文章对您有帮助吗?

平均评分 5 / 5. 次数: 1

尚无评价,您可以第一个评哦!

非常抱歉,这篇文章对您没有帮助.

烦请您告诉我们您的建议与意见,以便我们改进,谢谢您。