Kafka-kraft模式部署与使用

Kafka-kraft模式部署与使用

一文上手Kafka【中】

Kafka当中消息的发送、接收及消息确认机制.

RabbitMQ介绍和快速上手案例

这个其实也没有什么好介绍的,这个就是我们的消息队列的一种,因为这个兔子的繁殖速度快嘛,所以使用这个rabbit进行表示,没有其他的意思;这个rabbitMQ也仅仅是我们的这个众多的产品里面的一种罢了,我们主要学习这个消息队列;这个工作流程图里面的这个connection表示的就是我们的这个链接,这个

【Hadoop核心技术】

Hadoop 是一个开源的分布式计算平台,主要用于存储和处理大规模数据集。它的设计初衷是为了能够在由普通硬件构建的集群上高效运行,通过分布式存储和分布式处理来应对数据量的增长和复杂的数据处理需求。Hadoop 具有高可扩展性、高可靠性和高效性等特点,被广泛应用于大数据领域,如互联网公司的数据仓库建设

Hadoop的三种运行模式:单机模式、伪分布式模式和完全分布式模式

yarn-site.xml:这个文件包含了YARN(Yet Another Resource Negotiator)的相关配置属性,比如NodeManager的内存限制 (yarn.nodemanager.resource.memory-mb)、ApplicationMaster的内存限制 (yar

大数据技术之Spark :我快呀~

由于 MapReduce 的计算模型只有 Map 和 Reduce 两个阶段,在实现复杂计算需求时就要编写多个 Mapper 和 Reducer 的实现。以上面800个数据块为例子,MapReduce 会有800次的 Map 计算结果落盘以及多个 Reduce 计算结果聚合(这个行为有一个专业的术语

快速入门消息队列MQ、RabbitMQ

微服务一旦拆分,必然涉及到服务之间的相互调用,目前我们服务之间调用采用的都是基于OpenFeign的调用。这种调用中,调用者发起请求后需要服务提供者执行业务返回结果后,才能继续执行后面的业务。也就是说调用者在调用过程中处于阻塞状态,因此我们称这种调用方式为,也可以叫。但在很多场景下,我们可能需要采用

RabbitMQ的基本概念和入门

文将详细介绍RabbitMQ的基本概念、工作原理、应用场景以及其主要特性

RabbitMQ 如何保证消息不丢失?

要保证 RabbitMQ 的消息不丢失,需要从生产者、路由过程、消费者和 Broker 端采取一系列措施。消息丢失的常见原因包括:生产者发送失败、消息路由失败、消费者处理异常,以及 RabbitMQ 服务宕机未持久化。为解决生产者端的消息丢失问题,可以采用事务机制或发布确认机制,确保消息成功发送并得

【Rabbitmq篇】高级特性----事务,消息分发

【Rabbitmq篇】高级特性----事务,消息分发

Spark中的内存管理机制是如何工作的?

Spark 的内存管理机制通过执行内存和存储内存的分离,以及动态调整内存分配策略,来优化内存使用。通过合理的配置和监控,可以有效地管理 Spark 应用程序的内存使用,从而提高性能和稳定性。正确理解并配置这些内存管理选项,对于开发高性能的 Spark 应用程序至关重要。

Spark 的介绍与搭建:从理论到实践

通过本文对 Spark 的全面介绍,从其分布式思想、自身的发展历程、功能特点等,再到单机模式的搭建和测试,希望读者能够对 Spark 有一个清晰、深入的理解。Spark 作为大数据领域的重要工具,还有更多的潜力等待大家去挖掘和探索,希望这篇文章能成为大家在 Spark 学习和实践道路上的一个有力指引

HBase分布式数据库(二)

底层存储也是KV结构:每一列就是一条KV数据。

RabbitMQ的安装与配置

RabbitMQ的安装与配置

【快速入门】Kafka的安装部署

前提:在安装Kafka前要确保你的集群中有zookeeper我的三台服务器分别是bigdata01,bigdata02,bigdata03,并且修改了本机的hosts文件!

部署伪分布式 Hadoop集群

Hadoop目录介绍存放内容:Hadoop的各种可执行脚本和程序,如启动和停止Hadoop服务的脚本、Hadoop命令行工具等。功能:用于执行对Hadoop相关服务(如HDFS、YARN、MapReduce等)的操作和管理任务。存放内容:Hadoop的配置文件,如hadoop-env.sh(环境变量

RabbitMQ 篇-深入了解延迟消息、MQ 可靠性(生产者可靠性、MQ 可靠性、消费者可靠性)

每个 RabbitTemplate 只能配置一个 ReturnCallback,因此可以在配置类中统一设置。@[email protected]("触发return callback,");});测试:当发送消息的时候,设置一个不存在的路由:在交换机中,不存在 “xbss” 路由关键字,

【kafka01】消息队列与微服务之Kafka详解

阿里云消息队列 云消息队列 ApsaraMQ云消息队列 ApsaraMQ_打造消息服务生态-阿里云云消息队列 ApsaraMQ 是阿里云消息队列品牌,致力于“高弹性低成本、更稳定更安全、智能化免运维”三大核心方向的发展与创新,满足企业和开发者的不同业务场景需求。云消息队列 ApsaraMQ 全系列产

【Hadoop生态圈】Hadoop 概述

Hadoop Distributed File System,简称 HDFS,是一个分布式文件系统。1)NameNode(nn):存储文件的元数据,如文件名,文件目录结构,文件属性(生成时间、副本数、文件权限),以及每个文件的块列表和块所在的DataNode等。2)DataNode(dn):在本地文

Kafka为啥比RocketMQ快

- • RocketMQ 和 kafka 相比,在架构上做了减法,在功能上做了加法- • 跟 kafka 的架构相比,RocketMQ 简化了协调节点和分区以及备份模型。同时增强了消息过滤、消息回溯和事务能力,加入了延迟队列,死信队列等新特性。- • 凡事皆有代价,RocketMQ 牺牲了一部分性能

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈