Hive的安装与配置
Hive的安装与配置第1关：Hive的安装与配置第2关：Hive Shell入门基础命令
ZooKeeper命令和监控详解
通过以上介绍的ZooKeeper命令，我们可以方便地查看ZooKeeper服务器的各种信息，从而更好地监控和管理ZooKeeper。在实际使用中，我们可以根据需要选择适当的命令进行监控。同时，我们还可以通过编写脚本或使用第三方监控工具，定期执行这些命令并将结果发送到指定的邮箱或监控系统，以实现自动化
RabbitMQ小结
kafka优点：性能好，吞吐量高百万级，分布式，消息有序缺点：单机超过64分区，cpu会飙高，消费失败不支持重试 ，
kraft单机安装kafka无需安装zookeeper(Kafka2.8版本之后支持)
Apache Kafka 是一种用于构建实时流数据管道和应用程序的分布式事件流平台。随着 KRaft 模式的引入，Kafka 现在可以作为一个独立的系统运行，而不需要 Zookeeper。本指南涵盖了在 Linux 系统上安装和配置 Kafka 3.6.0 版本的各个步骤，从下载软件到启动和管理 K
RabbitMQ3.13.x之十一_RabbitMQ中修改用户密码及角色tags
RabbitMQ3.13.x之十一_RabbitMQ中修改用户密码及角色taags
flink mysql数据表同步SQL CDC
FlinkCDC提供一组源数据的连接器，使用变更数据捕获的方式，直接吸收来自不同数据库的变更数据。通过CDC获取源数据表的更新内容，将更新内容作为数据流下发到下游系统，可以做到mysql数据表数据的实时同步操作。：首先，一个MySQL数据库作为数据源，其中包含了想要同步的表。：Flink CDC C
hive_hql开发规范（SQL优化）
hive_hql开发规范（sql优化）
大数据-11-案例演习-淘宝双11数据分析与预测 （期末问题）
Hadoop 是一个开源的分布式计算框架，设计用于在大规模数据集上实现高效、可靠和可扩展的数据处理。HDFS是 Hadoop 项目的一个核心组件，它是一个针对大数据处理而设计的分布式文件系统。YARN 是一个通用的、可伸缩的资源管理平台，它允许在同一个集群上运行多种不同类型的应用程序。都是帮助处理和
Hive实验报告
(Press y|Y for Yes, any other key for No) 表示是否拒绝 root 用户远程登录，在键盘输入 n 和回车，表示允许 root 用户远程登录。((Press y|Y for Yes, any other key for No)表示是否更改 root 用户密码，在
spark-hive连接操作流程、踩坑及解决方法
hive安装；spark-hive兼容版本编译；spark-sql操作hive表格
第55天：服务攻防-数据库安全&Redis&Hadoop&Mysql&未授权访问&RCE
也会输入这个文件当中造成影响，可以新开一个kali窗口，进行纯净版的输入，如图。因为root用户只能本地登录，可以采取利用phpmyadmin去远程登录利用，爆破密码。1.redis.conf中 bind表示允许谁访问，被注释了表示都可以访问。首先centos中的计时任务，可以写在/var/spoo
Dask库一个神奇处理大数据在python的库
Dask 是一个灵活的并行计算库,旨在处理大规模数据集.它提供了类似于 Pandas 和 NumPy 的数据结构,但能够有效地处理比内存更大的数据集
Springboot-RabbitMQ 消息队列使用
RabbitMQ中几个重要的概念
hive-批量导出表结构，导入表结构
将all_create_table.txt打开，批量将create table 替换成；create table ，如果建的是外部表，就需要将create external table 替换成;（因为导出的每个表后面并没有加分号，导入的数据，每个表的建表语句要以分号结尾）使用use 数据库名，进入某
头歌 Spark的机器学习-MLlib
第1关 MLlib介绍package com.educoder.bigData.sparksql5;import java.util.Arrays;import java.util.List;import org.apache.spark.ml.Pipeline;import org.apache.
Flink存储机制及核心原理分析
胡弦，视频号2023年度优秀创作者，互联网大厂P8技术专家，Spring Cloud Alibaba微服务架构实战派(上下册)和RocketMQ消息中间件实战派(上下册)的作者，资深架构师，技术负责人，极客时间训练营讲师，四维口袋KVP最具价值技术专家，技术领域专家团成员，2021电子工业出版社年度
【大数据】Spark使用大全:下载安装、RDD操作、JAVA编程、SQL
一文详解Spark的使用
数据仓库技术及应用（Hive调优）
HiveSQL是一种声明式语言，用户提交的交互式查询，Hive会将其转换成MR任务。Hive提供EXPLAIN命令显示查询语句的执行计划，通过显示信息可以了解Hive如何将查询转换为MR。
十二、哪些情况下不需要采取三大数据出境制度即可出境数据？
在此过程中，境外消费者的订单信息是由国内电商平台的境外站收集后入境的，用户账号也由该平台国际站负责运营管理，境外消费者的个人信息收集活动不发生在境内，且入境后的处理过程未引入境内消费者的个人信息，经过平台确认交易订单信息后发送给境外的物流公司和航空公司进行运输配送。但类似于场景（五），“跨境运输”的
一文搞懂RabbitMQ
RabbitMQ是一个开源的消息中间件，它实现了高级消息队列协议（AMQP），用于在不同的应用程序之间进行异步通信，一文搞懂
