Kafka是非常重要的消息中间件,也是大型架构必备技能,今天详解4大Kafka可视化工具@mikechen
EFAK
EFAK(Eagle for Apache Kafka),原名Kafka Eagle,是一个用于管理、和监控Apache Kafka集群的平台。
EFAK提供了许多功能,比如:监控、管理、告警……….等功能。
比如:
提供集群基本信息的查看,比如:Broker列表、Topic列表、Partition状态……等。
实时监控Kafka集群的健康状态,监控指标包括:流量、延迟、错误率….等。
并且,还支持自定义告警策略,比如:指定特定Topic的消息积压告警…等,以及多种告警通知方式,比如:邮件、通信…等方式。
总之,EFAK集监控、管理、告警于一体,满足Kafka集群管理的各种需求。
Kafdrop
Kafdrop 是一个轻量级的开源 Kafka Web UI,提供了直观的用户界面来浏览、和管理 Kafka 集群。
如下图所示:
主要功能:
- 集群浏览:显示集群的基本信息,包括: Broker、Topic 、和 Partition…等;
- 消息浏览:查看和搜索特定 Topic 的消息内容,支持 JSON 格式的消息查看;
- 消费者监控:显示消费者组、和消费进度信息;
- Topic 管理:创建、删除、和修改 Topic。
Kafka Manager
Kafka Manager是一个用于管理、和监控 Kafka集群的工具,提供了直观的Web界面,帮助用户更容易地管理、和操作Kafka集群。
Kafka Manager启动后,可以通过浏览器访问其Web界面,默认地址是 http://localhost:9000
。
Kafka Manager支持以下内容:
通过可视化界面,简化Kafka集群的管理操作,比如:Topic创建、Partition再分配…等;
以及,检查群集状态,比如:主题、偏移量、代理、副本、分区分发…等等;
以及,查看topic的信息,以及Topic的综合信息,和指标信息…等等。
如下图所示:
备注:确保Kafka Manager版本、与Kafka集群的版本兼容,不同版本之间可能存在一些不兼容的问题。
Kafka Monitor
Kafka Monitor是“linkedin”开源的监控框架,专门用于监控、和评估 Apache Kafka,以及 集群性能、和健康状态的工具。
如下图所示:
这款监控框架,更多的是关注:
负载测试 Kafka 集群的吞吐量、和延迟,以及,评估集群的性能…等;
以及,帮助用户了解 Kafka 集群在高负载下的表现,指导集群扩容、和优化;
收集详细的性能指标、和报告,分析集群的性能瓶颈…等。
可以根据具体需求选择合适的工具,可以显著提高 Kafka 集群的管理、和效率。
作者简介
陈睿|mikechen,10年+大厂架构经验,BAT资深面试官,就职于阿里巴巴、淘宝、百度等一线互联网大厂。
关注作者「mikechen」公众号,获取更多技术干货!
后台回复【架构】,即可获取《阿里架构师进阶专题全部合集》,后台回复【面试】即可获取《史上最全阿里Java面试题总结》