springboot集成kafka的相关配置及自定义
有这样一个场景，在项目中，我们搭建了kafka集群，然而在环境中，会有各种不同的消息，有一些消息不是我们需要的，有些消息是我们需要的，这时我们可以通过过滤器来进行控制和过滤。kafka内部自己实现分区、策略等一系列的逻辑，当然这些也可以自定义，这里有需要的可以自己研究一下，我这里就不需要了。之前的文
【项目实战】Kafka中Topic创建介绍
Topic可以看作是一个消息队列生产者将消息发送到Topic中，消费者从Topic中消费消息。
【Kafka】超详细介绍
Kafka 超详细介绍
消息队列是什么
在像双11 的时候秒杀等系统的时候，用户直接访问数据库，数据库一时接受到大量的数据请求，就会压垮数据库，所以在这个时候加入消息队列，用消息队列的大吞吐量，快速处理用户的请求（哪怕是Redis还不足够应对这种大数据访问）。使用消息队列可以实现系统与系统之间的解耦，比如 买票系统中买票，用户是不直接调用
手记系列之六 ----- 分享个人使用kafka经验
本篇文章主要介绍的关于本人从刚工作到现在使用kafka的经验，内容非常多，包含了kafka的常用命令，在生产环境中遇到的一些场景处理，kafka的一些web工具推荐等等。由于kafka这块的记录以及经验是从我刚开始使用kafka，从2017年开始，可能里面有些内容过时，请见谅。Kafka是一种高吞吐
【学习笔记】kafka学习二
kafka学习笔记
Kafka 3.4.0 kraft 集群搭建
Apache 软件基金会发布了包含许多新特性和改进的 Kafka 3.3.1。这是第一个标志着可以在生产环境中使用 KRaft（Kafka Raft）共识协议的版本。在几年的开发过程中，它先是在 Kafka 2.8 早期访问版本中发布，然后又在 Kafka 3.0 预览版本中发布。KRaft 是一种
Springboot 集成kafka
解释：这里定义了消费者id为ifun-001，消费者组id为ifun-01，同时监听两个topic，ifun1和ifun2，其中监听ifun1的0号分区，ifun2的0号和1号分区，其中1号分区开始的offset为8，也就是说如果next-offset大于8就会消费，小于8不会消费。消息过滤器可以在
Kafka如何保证数据高可靠
生产者只要将数据发送到leader副本，kafka就会返回ack，leader中的数据先在缓存中，数据写磁盘需要一段时间。ISR假设为空，或者小于最小副本数，生产者往Kafka写数据的时候一直会报错，不能说它一报错Kafka生产者就直接终止，我们肯定要设置一个重试次数，来提升程序的健壮性。这种情况下
Kafka实时数据即席查询应用与实践
Kafka中的实时数据是以Topic的概念进行分类存储，而Topic的数据是有一定时效性的，比如保存24小时、36小时、48小时等。而在定位一些实时数据的Case时，如果没有对实时数据进行历史归档，在排查问题时，没有日志追述，会很难定位是哪个环节的问题。
Kafka
大数据面试- Kafka
KafKa 3.x（一、入门）
kafka
Flink Configuration 配置文件的配置
Flink 运行命令详细介绍Flink Configuration | flink-conf.yaml中的配置Basic Setup ｜ 默认配置引流：FLINK 的命令 FLINK 的配置 Flink执行说明对 FLINK 的运行命令做完整的介绍参考文章：Flink Configuration
Kafka rebalance 的几种原因与解决方案
JoinGroupmember idStatic Memberrejoin
Kafka系列——详解创建Kafka消费者及相关配置
详解kafka消费者以及消费者组；介绍分区如何分配给消费者，以及分配策略，介绍各种超时参数；介绍超时的行为，心跳发送的细节
Kafka怎么保证数据不丢失，不重复
唯一例外的情况是，我们在程序中给原本做不同功能的两个consumer组设置 KafkaSpoutConfig.bulider.setGroupid的时候设置成了一样的groupid，这种情况会导致这两个组共享同一份数据，就会产生组A消费partition1，partition2中的消息，组B消费pa
Kafka 面试题
1、是什么确保了 Kafka 中服务器的负载平衡？2、消费者 API 的作用是什么？3、解释流 API 的作用？4、Kafka 为什么那么快?5、Kafka 系统工具有哪些类型？6、partition 的数据如何保存到硬盘7、Zookeeper 对于 Kafka 的作用是什么？8、流 API 的作用
简单的kafka命令行操作
简单的kafka命令行操作一、主题topic命令行操作二、生产者命令行操作
kafka的push、pull分别有什么优缺点
在 Kafka 中，生产者使用 push 模式将消息推送给 Kafka 集群，而消费者则使用 pull 模式从 Kafka 集群中拉取消息。本文对 Kafka 的 push 和 pull 两种模式进行比较，分析其优缺点。Pull 模式是 Kafka 新增的方式，使用该模式时，消费者可以自主选择从哪个
Kafka：主题创建、分区修改查看、生产者、消费者
Kafka命令行主题创建、分区修改查看、生产者创建、消费者创建
