kafka监控工具kafkaOffsetMoniter的使用

简介

KafkaOffsetMonitor是由Kafka开源社区提供的一款Web管理界面，用来实时监控Kafka的Consumer以及Partition中的Offset，可以在web界面直观的看到每个Partition的Message的增长速度，是否消费，是否阻塞等。

使用

如果不想编译，可以直接去下个jar包

下载地址

写个脚本

vim kafkaOffsetMoniter.sh

nohup java -cp KafkaOffsetMonitor-assembly-0.2.0-2.jar \
com.quantifind.kafka.offsetapp.OffsetGetterWeb \
--zk zk1:2181,zk2:2181,zk3:2181 \
--port 8089 \
--refresh 10.seconds \
--retain 1.days &

启动脚本

sh kafkaOffsetMoniter.sh

常用参数说明

–zk - Zookeeper hosts

–port - 启动webUI的端口号

–refresh - 页面数据刷新时间

–retain - 历史数据存放的时间（存放在SQLlite中）

运行界面

Topic信息

参数说明

Topic - Topic名称

Partition - 分区编号

Offset - 该partition消费的消息

logSize - 该partition所有的消息

Lag - 未被消费的消息数量

Owner - 消费者

Created - partition创建时间

Last Seen - 最后一次消费时间

消息消费图

集群