内容纲要
概要描述
kafka的消费积压180万+
集群环境 4.8.4
详细说明
通过命令查看到lag积压180万+,并且还在持续增长:
./kafka-consumer-groups.sh --describe --bootstrap-server 172.22.39.7:9092 --group console-consumer-23651
而客户反馈落表数据没有影响,落表速度也没有减慢
查看到该topic一共被4个消费者组消费:
客户查看的是第一个console-consumer-30390的消费者组,console-consumer-****是kafka默认起的消费者组名称;另外3个消费者组正好对应4044上跑的streamjob:
这3个消费者组没有lag积压情况:
故认为前面发生积压的console-consumer-30390消费者组是客户手动起的一个消费者产生的,停掉即可