大数据 - Hadoop系列《四》- MapReduce（分布式计算引擎）的核心思想
本文主要介绍了MR的工作原理
32个Java面试必考点-09(上)消息队列Kafka架构与原理
1.Kafka 的架构与消息交互流程；2.数据库事务的 4 大特性和分类；3.MySQL 相关的内容，比如索引、MySQL 调优等。
大数据与物联网的融合：改变传统商业模式
1.背景介绍随着互联网的普及和技术的不断发展，我们的生活和工作都变得更加智能化和高效化。物联网(Internet of Things，IoT)是一种新兴的技术，它将物理世界的设备与数字世界的网络连接起来，使得这些设备能够互相通信和协同工作。这种互联互通的设备被称为“物联网设备”或“智能设备”。物联网
Flink-SQL——时态表(Temporal Table)
Temporal Table可以简化和加速我们对历史状态数据的查询，并减少对状态的使用。Temporal Table是将一个Append-Only表(如上product_history_info)中追加的行，根据设置的主键和时间(如上productID、updatedAt)，解释成Chanlog，并
Hadoop：HDFS学习巩固——基础习题及编程实战
4.分布式文件系统HDFS采用了主从结构模型，由计算机集群中的多个节点构成的，这些节点分为两类，一类存储元数据叫（）？A.把文件名发送给名称节点，根据文件名在名称节点上找到数据块的实际存储信息，客户端再到数据节点上获取数据。9.数据节点负责数据的存储和读取,每个数据节点中的数据会被保存在()。C 存
RabbitMQ-4.MQ的可靠性
不过出于性能考虑，为了减少IO次数，发送到MQ的消息并不是逐条持久化到数据库的，而是每隔一段时间批量持久化。为了解决这个问题，从RabbitMQ的3.6.0版本开始，就增加了Lazy Queues的模式，也就是惰性队列。：在开启持久化机制以后，如果同时还开启了生产者确认，那么MQ会在消息持久化以后才
利用 pt-archiver 实现数据库归档功能
利用 pt-archiver 实现数据库归档功能。
数据仓库与Tableau的集成与优化
1.背景介绍数据仓库与Tableau的集成与优化1. 背景介绍数据仓库和Tableau是现代数据分析领域中两个核心概念。数据仓库是一种用于存储和管理大量数据的系统，而Tableau是一种数据可视化和分析工具。在现代企业中，数据仓库和Tableau之间的集成和优化已经成为关键的技术要求。本文将深入探讨
FlinkProtobuf源与接收器
1.背景介绍1. 背景介绍Apache Flink是一个流处理框架，用于处理大规模数据流。Flink可以处理实时数据流和批处理数据，并提供了一种高效、可扩展的方法来处理数据。Flink的核心组件是数据流图(DataStream Graph)，它由数据源(Source)、数据接收器(Sink)和数据流
FlinkSQL对接MySQL CDC写入数据到Hive
对使用flink将mysql数据变化数据实时写入Hive的过程进行记录。包括mysql开启binlog，使用flinkcdc实时同步到kafka，并再使用flink将数据kafka中的数据流式写入Hive
HiveSQL——用户行为路径分析
HiveSQL——用户行为路径分析
Hive之set参数大全-15
在 Hive 中，是一个参数，用于配置是否允许 Tez 会话使用自定义队列。该参数影响在 HiveServer2 中执行的 Tez 会话是否可以选择使用自定义的队列。以下是设置其中，是布尔值，用于启用或禁用 Tez 会话使用自定义队列。请注意，这样的设置只对当前 HiveServer2 会话有效，当
阿里技术官亲笔：Kafka限量笔记，一本书掌握Kafka的精髓
我们常常仰望那些大厂的大神们，但要知道，他们也不过是平凡的人，只是比菜鸟程序员多付出了几分心思。如果你不努力，差距只会越拉越大。作为程序员，充实自己的知识和技能是至关重要的。在我看来，付出的努力和回报是成正比的。学习Kafka并不难，这份Kafka限量笔记的内容将会对你的学习大有裨益。如果你想要这份
Apache Spark架构与特点
1.背景介绍Apache Spark是一个开源的大数据处理框架，由AMLLabs公司开发，后被Apache软件基金会所支持。它可以处理批量数据和流式数据，并提供了一个易用的编程模型，使得开发人员可以使用Scala、Java、Python等编程语言来编写程序。Spark的核心组件是Spark Stre
ClickHouse与ApacheHadoop集成
1.背景介绍1. 背景介绍ClickHouse 是一个高性能的列式数据库，主要用于日志分析、实时统计和数据存储。Apache Hadoop 是一个分布式存储和分析框架，主要用于大规模数据处理和分析。在现代数据科学和大数据处理领域，这两个技术在很多场景下都有着重要的地位。因此，了解如何将 ClickH
Python进阶知识：整理1 -＞ pySpark入门
Python进阶知识：整理1 -> pySpark入门: 1 编写执行入口；2 数据输入；3 数据计算；4 数据输出
RabbitMQ的延迟队列实现[死信队列](笔记一)
rabbitMQ延迟队列使用死信队列方式实现服务端配置
Zookeeper与Apollo的对比分析
1.背景介绍1. 背景介绍Apache Zookeeper 和 Alibaba Apollo 都是分布式系统中常用的配置管理和协调服务。Zookeeper 是一个开源的分布式协调服务，用于构建分布式应用程序的基础设施。Apollo 是 Alibaba 公司开发的一款分布式配置中心，用于管理、分发和更
hive 3.1.3 on spark 3.0.0 安装教程 (内附重新编译好的jar包)
一步一步教会你如何部署 hive 3.1.3 on spark 3.0.0，文章还提供了修改好的源码包~
RabbitMQ
RabbitMQ
