领取20万字《Kafka运维与实战宝典》PDF文档
作者:石臻臻,CSDN博客之星Top5、、、华为云 MVP,腾讯云TVP,滴滴Kafka技术专家、。。大家好,我是 石臻臻应广大读者要求,我把Kafka运维相关系列文章整理成了《Kafka运维与实战》PDF手册啦这份手册包含 运维和开发人员必备知识点和运维命令,还有很多常见的异常问题及其解决方案我会
Hadoop生态之Kafka(一)
Kafka基础知识以及对设计模式的理解Kafka面试题
基于kafka,zookeeper实现的日志收集平台搭建
l项目描述:分别使用3台Linux服务器来作为nginx集群搭建前端web服务,kafka集群和zookeeper集群,2台Linux机器做反向代理集群。
大数据Apache Druid(六):Druid流式数据加载
打开postman,post请求URL:http://node3:8081/druid/indexer/v1/supervisor,在row中写入以上json配置数据提交即可,执行之后可以在Druid页面中看到对应的supervisors和Datasource。执行聚合查询:select loc,i
kafka 使用thrift序列化对象
而解决这个问题的办法就是采用第三方的支持跨语言的序列化/反序列化框架,所谓的跨语言, 意思就是说,不管你是什么语言生成的对象,那你存入kafka的时候 用我的序列化协议,我帮你序列化, 当你从kafka中获取数据的时候, 也请用我来反序列化。kafka存储的实际上不是python对象也不是ja
Kafka的数据可靠与数据重复
kafka数据重复及数据可靠性问题
【KafkaStream】微服务学习笔记十一:流式计算概述&KafkaStream入门
主要介绍流式计算的概念、应用场景以及如何利用Kafka Stream实现流式计算。
kafka整合springboot以及核心参数的使用
kafka简单使用
基于Docker-compose构建Kafka集群
首先,先向大家道个歉。由于前段时间的工作调整,导致我一直没有进行更新。现在工作逐渐走上正轨,现在决定继续更新自己学习的内容。希望对于学习或者从事大数据开发的你提供一些帮助。本次更新的内容为如何使用Docker-compose技术进行Kafka集群的构建。...
基于kafka的日志收集分析平台
Windows10机器(测试用)、Linux(centos7)、Nginx(1.20.1)、Filebeat(7.17.5)、kafka(1.12)、zookeeper(3.6.3)、Pycharm2020.3、mysql(5.7.34)创建/tmp/zookeeper目录,在目录中添加myid文件
Flink 消费Kafka每日不定时积压(非重启不能解决)问题排查解决
进来看看吧,说不定有收获
日志收集平台day01:项目设计
本项目的目的是模拟生产环境下对web服务器产生的日志进行收集并存入数据库,最终以web应用方式展示日志数据。
Docker部署kafka Zookeeper
部署kafka,zookeeperkafka-topics.sh--create--zookeeper服务器私网2181--replication-factor1--partitions1--topicmykafka。KAFKA_ZOOKEEPER_CONNECT=“服务器的私网ip2181”-e。
使用docker-compose 搭建 kafka集群 + 可视化工具
docker 容器 搭建 kafka集群 安装并使用docker-compose 搭建 kafka集群 + 安装可视化工具
【kafka专栏】SpringBoot下`@KafkaListener`消费监听属性详解
KafkaListener有若干的配置属性,这些配置属性使用或者是结合使用,可以方便快捷的帮助我们实现kafka消费者数据监听的需求。这里的属性比较多,先大概了解一下,后续我会介绍。通常我们会把消费者监听的主题,消费者组名称,消费者组中消费者数量等常用信息做成自定义配置(而不是在代码中写死),如下所
【kafka专栏】消费者组数据积压的查看与处理方法
消费者组数据积压的查看与处理方法
【SpringBoot整合MQ】-----SpringBoot整合Kafka
windows版安装包下载地址:https://kafka.apache.org/downloads 下载完毕后得到tgz压缩文件,使用解压缩软件解压缩即可使用,解压后得到如下文件 建议使用windows版2.8.1版本。启动服务器 kafka服务器的功能相当于RocketMQ中的
windows下安装kafka教程(遇到的坑)
Windows下安装运行kafka第二步,启动kafka2 . 下载kafka:http://kafka.apache.org/downloads.html (注意下载binary版本的) 3. 解压到相应文件夹,进入config目录下,找到server.properties文件,并作以下修改:
MQ如何保证消息不丢失
如何保证MQ消息不丢失
【kafka专栏】生产者同步及异步发送数据三种方式
apache kafka生产者客户端三种同步及异步发送数据的方式