一文通吃：从 ZooKeeper 一致性，Leader选举讲到 ZAB 协议与 PAXOS 算法（上）
本文将从ZooKeeper集群如何保证一致性，讲到zookeeper保证数据一致性的协议，然后展开讲Zookeeper集群Leader选举，包括集群三种节点的类型，ZAB协议中节点的四种状态，以及两种情况下Leader选举的过程。然后会详细展开讲解ZAB协议，包括ZAB协议中ZXID的结构，ZAB协
【 大数据分析Hadoop + Spark 】10分钟搭建Hadoop（伪分布式 ）+ Spark（Local模式）环境
【 大数据分析Hadoop + Spark 】10分钟搭建Hadoop（伪分布式 ）+ Spark（Local模式）环境
【分布式数据库技术】相关知识概述
分布式数据库技术-基础知识概述1. NoSQL数据库的类型有哪些？2. 怎么判断一个数据库是否是NoSQL数据库？3. NoSQL技术诞生的最初发点是为了解决什么问题？4. 列族数据库存储结构？5. NoSQL数据库有哪些不同类型并举例说明?6. 文档数据库存储的基本元素是哪些？7. Nosql事务
一.Kafka入门到精通-Kafka快速入门
前言在内卷严重的程序员圈子中，原地踏步就是退步，所以不能再躺平啦，赶紧爬起来学习，接下来博主将推出《Kafka入门到精通》系列文章，让你可以在企业中玩起Kafka来得心应手，此乃升职加薪必备呀。Kafka认识Kafka 是由Linkedin公司开发的，支持多分区、多副本，基于 Zookeeper 的
第三章 注册中心-Zookeeper
一、注册中心概述对于服务提供方，它需要发布服务，而且由于应用系统的复杂性，服务的数量、类型也不断膨胀；对于服务消费方，它最关心如何获取到它所需要的服务，而面对复杂的应用系统，需要管理大量的服务调用。而且，对于服务提供方和服务消费方来说，他们还有可能兼具这两种角色，即需要提供服务，有需要消费服务。 通
RabbitMq概述与工作模式(1)
一，Mq概念1.1 Mq概述Mq全称 Message Queue，是在消息传输过程中保存消息的容器，多用于分布式系统之间的通信1.2 Mq优势1，应用解耦如下图，假设a和bcde系统都要实现交互，在不使用mq的情况下，那么就会增加系统之间的耦合性，并且增加系统之间的开销，在使用mq的情况下，a只需将
ZooKeeper的配置选项的安装步骤
（一）下载和安装zooKeeper（1）在起始的/opt 目录下建立software文件和module文件，software文件用来下载安装包，下载后的安装包·可以·解压到module文件。可以用下面这一行代码：tar zxvf /opt/software/zookeeper-3.4.8.tar.g
Kafka调研
文章目录1. Kafka概述1.1 Kafka消费模式1.1.1 点对点模式1.1.2 发布/订阅模式1.2 Kafka的基础架构1. Kafka概述 Kafka 是一个分布式的基于发布/订阅模式的消息队列（Message Queue），主要应用于大数据实时处理领域，如海量日志的处理。1.1 Ka
Zookeeper权限控制ACL学习笔记
Zookeeper集群部署后怎样管理各个客户端服务的读写创建删除权限，采用ACL（Access Control List）访问控制表，可以针对节点设置相关读写等权限，保障数据安全性。ACL构成zookeeper 的 acl 通过 [scheme:id:permissions] 来构成权限列表。sch
[Dubbo3.0.8源码解析系列]-16-模块发布器发布服务全过程
目录16-模块发布器发布服务全过程16.1 简介16.2 导出服务的入口16.3 服务配置导出服务16-模块发布器发布服务全过程16.1 简介Dubbo做为服务治理框架,比较核心的就是服务相关的概念,这里我先贴个找到的关于Dubbo工作原理的架构图:如果按完整服务启动与订阅的顺序我们可以归结为以下6
图解Kafka的RecordBatch结构
文章目录RecordBatchRecordBatch初始化写入消息Record结构图关闭ProducerBatch关闭输出流appendStream并压缩数据填充RecordBatchHeader数据RecordBatchHeader结构图RecordBatch整体结构图阅读完本文你大概会获得以下知
一文彻底弄清楚分布式锁
关于实现强一致性的手段，可以使用多种方式来进行实现，有**分布式事务**，有**一致性算法**，还有**分布式锁**等等，那么这篇文章我们就围绕分布式锁这个话题来进行展开，首先，我们会先探究它的原理，然后结合实际应用，对目前较为常见的分布式锁实现方式及注意事项进行详细的分析。
我们如何在代码中实现主从的选择-Java
问题描述：我们在分布式任务系统之中，会经常遇见一种情况，比如：定时的对任务进行刷新，然后进行一些操作。通常我们会将这个定时任我Job单独部署成一个服务，这个服务如果我们不进行主选择，便会出现多个服务同时进行刷新，造成业务的紊乱。解决方案：使用Zookeeper来进行主的选择1、添加对应的依赖<
消息队列-kafka关于CommitFailedException问题
说明：转载本人掘金文章概述提交offset失败这个异常也是我们开发中常见的异常，那么这个异常是怎么引起的呢？只要我们明白原因，那么就能避免，特别是在异步提交情况下（offset丢失），导致重复消费，消息一直卡在最后一批，导致业务数据受到严重的破坏。了解消费者实例机制1.kafka消费者都是按照批量消
【Hadoop伪分布式安装】之安装JDK如何通过WinSCP将JDK上传到CentOS
文章目录前言一、WinSCP将JDK上传到CentOS1. WinSCP连接CentOS2. 连接成功3. 上传jdk-8u211-linux-x64.tar二、安装JDK1. 未上传JDK时，CentOS的/usr/java目录里面啥都没有2. 上传JDK成功可查看到jdk-8u211-linux
面试必问 | 聊聊Kafka的消费模型？
最近，有些读者去头条二面，被面试官问了一个关于Kafka的问题：多个Kafka消费者如何同时消费相同Topic下的相同Partition的数据？看似一个简单的问题，竟然把这位读者问懵了！今天，我们就一起来说说这个面试题，好了，开始今天的主题。
分布式协调服务-ZooKeeper
What is ZooKeeper?
Zookeeper入门及使用
ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是典型的分布式一致性解决方案。Zoookeeper是通过共享存储的方式来实现分布式协调的，就像是电脑上面的共享文件夹。可以实现发布订阅、负载均衡、命名服务、集群管理、分布式锁等功能。
【微服务】（十六）—— 分布式事务Seata
目录事务ACID原则一、理论基础1）CAP理论CAP定理- ConsistencyCAP定理- AvailabilityCAP定理-Partition tolerance2）BASE理论二、分布式事务Seata1）初识seata2）Seata架构3）微服务集成seata1、首先，引入seata相关依
Zookeeper——分布式锁的概念理解 & 应用举例
文章目录：1.前言2.原生Zookeeper实现分布式锁3.Curator框架实现分布式锁案例4.Zookeeper常见面试题1.前言什么叫做分布式锁呢？ 比如说"进程 1"在使用该资源的时候，会先去获得锁，"进程 1"获得锁以后会对该资源保持独占，这样其他进程就无法访问该资源，"进程 1"用完该资
