kafka的rebalance机制
再平衡：Reblance是一种协议，规定了一个ConsumerGroup下所有Consumer如何达成一致，来分配订阅Topic的每个分区，尽量让每个消费者分配到相对均匀的分区，使Consumer的资源都能得到充分利用，防止有些Consumer比较忙，有的Consumer比较闲。
springboot整合kafka入门
Kafka实际环境有可能会出现Consumer全部宕机，虽然基于Kafka的高可用特性，消费者群组中的消费者可以实现再均衡，所有Consumer不处理数据的情况很少，但是还是有可能会出现，此时就要求Consumer重启的时候能够读取在宕机期间Producer发送的数据。msg=web world31
【消息队列】细说Kafka消费者的分区分配和重平衡
kafka 分区分配和重平衡
Kafka-副本数量设置
ISR 机制的另外一个相关参数是, 可以在 broker 或者主题级别进行配置，代表 ISR 列表中至少要有几个可用副本。这里假设设置为 2，那么当可用副本数量小于该值时，就认为整个分区处于不可用状态。此时客户端再向分区写入数据时候就会抛出异常。
Kafka如何解决消息丢失的问题
在以上这三步中每一步都可能会出现丢失数据的情况， 那么 Kafka 到底在什么情况下才能保证消息不丢失呢？
zookeeper和kafka
Zookeeper是一个开源的分布式的，为分布式框架提供协调服务的Apache项目。主要原因是由于在高并发环境下，同步请求来不及处理，请求往往会发生阻塞。比如大量的请求并发访问数据库，导致行锁表锁，最后请求线程会堆积过多，从而触发 too many connection 错误，引发雪崩效应。我们使用
docker中快速安装Kafka(单节点)
docker中快速安装Kafka_单节点
kafka启动、状态监控、日常操作
kafka启动、状态监控、日常操作
30、Flink SQL之SQL 客户端（通过kafka和filesystem的例子介绍了配置文件使用-表、视图等）
SQL 客户端允许用户创建用户自定义的函数来进行 SQL 查询。当前，这些自定义函数仅限于 Java/Scala 编写的类以及 Python 文件。为提供 Java/Scala 的自定义函数，你首先需要实现和编译函数类，该函数继承自 ScalarFunction、 AggregateFunction
分布式 - 消息队列Kafka：Kafka 消费者的消费位移
再考虑一种情况，当有新的消费者加入时，那么必然会有再均衡的动作，对于同一分区而言，它可能在再均衡动作之后分配给新的消费者，如果不持久化保存消费位移，那么这个新的消费者也无法知晓之前的消费位移。如下图，x 表示某一次拉取操作中此分区消息的最大偏移量，假设当前消费者已经消费了 x 位置的消息，那么我们就
如何查看Kafka的Topic消费情况
2.10为Scala版本，0.10.0.2.5.3.0为kafka版本。进入kafka安装目录，然后执行以下命令。从某一时间开始消费某一topic。从最开始开始消费某一topic。或者不指定日志输出位置和设置。
Docker 搭建 zookeeper、kafka 集群
docker 容器部署 kafka 集群
Kafka怎么保证数据不丢失，不重复
Kafka是一个分布式消息队列系统，具有高可靠性、高性能和高扩展性等特点。在数据传输过程中，Kafka采用了多种措施来保证数据的可靠性，包括数据复制、数据持久化、数据备份等。本文将从各个阶段深入分析Kafka如何保证数据不丢失、不重复，并提供代码实例来验证过程。
kafka：broker、producer、consumer常用配置
摘要 kafka参数官方文档为：https://kafka.apache.org/documentation/#producerconfigs，这里记下常用配置。broker 我们在kafka官网下载的文件比如kafka_2.11-2.4.0.tgz解包启动后就是就是kafka节点，主要
实战：彻底搞定 SpringBoot 整合 Kafka
kafka是一个消息队列产品，基于Topic partitions的设计，能达到非常高的消息发送处理性能。Spring创建了一个项目Spring-kafka，封装了Apache 的Kafka-client，用于在Spring项目里快速集成kafka。除了简单的收发消息外，Spring-kafka还提
kafka-保证数据不重复-生产者开启幂等性和事务的作用？
1.生产者开启幂等性为什么能去重
kafka--技术文档--架构体系
此外，Kafka还有一个非常重要的概念是“Consumer Group”，这是Kafka用来实现一个Topic消息的广播（发给所有的Consumer）和单播（发给任意一个Consumer）的手段。一个Topic可以有多个Consumer Group。
Kafka 和 MQTT消息中间件在车联网TSP使用浅析
Kafka 和 MQTT 是常用的消息传递协议，它们在车联网TSP中主要用于消息队列和消息发布/订阅服务。
springboot的kafka使用
springboot的kafka使用
Kafka学习笔记（高级篇）
Kafka学习笔记（高级篇）
