一、Kafka Manager简介
Kafka Manager 可能是现在能找到的最好的可视化的Kafka管理工具, 感谢Yahoo的开源;
- 使用Kafka Manager, 基本上之前需要运行Kafka相应命令行工具的工作现在都可以可视化的完成:
- 创建Topic, 调整消息保存时长, Partition数量等等配置;
- 管理Topic, 包括Reassign Partitions, Preferred Replica Election等等;
- 消费情况查看, 支持offset保存到zk和broker两种方式, 列出所有消费的group, 消费每个partition的详情;
- 集群的简单健康状态查看,包括partition分布是否均衡, leader分布是否均衡等;
- 通过JMX查看各种指标, 比如各个broker的网络流量和消息进出数据, 每个Topic消息的读写速度等;
- 下面我们会先简单介绍下Kafka Manager的实现和在使用中遇到的几种坑;
二、Kafka Manager部署
kafka manager官网地址:https://github.com/yahoo/kafka-manager
该地址中存放的是源码,需要重新编译方可使用,需要的jdk为11版本,在项目中为了保持jdk版本一致,特使用了jdk1.8编译了其他版本。
kafka的使用通过zookeeper来存储集群信息,kafka-manager的使用同样需要zookeeper的集群信息,通过zookeeper的存储信息来保持对kafka集群的维护。
(1)下载地址:
jdk1.8版本的kafka-manager
版权归原作者 O溺水的鱼0 所有, 如有侵权,请联系我们删除。