kafka：消费者组反复重平衡问题解决之道

背景​ kafka 消费重平衡机制，就是让一个消费者组下所有的 Consumer 实例就如何消费订阅主题的所有分区达成共识的过程。在重平衡过程中，所有 Consumer 实例共同参与，在协调者组件的帮助下，完成订阅主题分区的分配。但是，在整个过程中，所有实例都不能消费任何消息，会影响

查看全文

Kafka介绍

1、Kafka概述1.1 定义Kafka是一个分布式的基于发布/订阅模式的消息队列（Message Queue），主要应用于大数据实时处理领域。1.2 消息队列1.2.1 传统消息队列的应用场景使用消息队列的好处。1）解耦允许你独立的扩展或修改两边的处理过程，只要确保它们遵守同样的接口约束2）可恢复

查看全文

ELK介绍

前言在运维环境中，管理员通常面对大量的服务器，对于这些服务器的维护，一个很重要的工作就是查看每台服务器的日志信息，如果使用elk，可以将所有的日志集中到一个地方，并且通过图形化、可视化分析日志，实时监控业务状态elk日志分析平台架构（三种）datasource -> logstash ->

查看全文