Hive综合应用案例——用户学历查询
任务描述本关任务：查询出每一个用户从出生到现在的总天数编程要求在右侧编辑器补充hql语句，查询出每一个用户从出生到现在的总天数。创建数据库：mydb创建表：usertab字段名 类型 注释id int 用户idsex string 性别,f:女性,m:男性time string 出生日期educat
Flink内核源码解析(出自B站尚硅谷)
文章目录任务提交流程本套教程针对Flink 1.12.0版本的核心模块进行源码级讲解，从任务提交流程、通讯过程、Task调度、内存模型四大方面入手，庖丁解牛逐行分析源码，手术刀级别剖析Flink内核架构！任务提交流程实例以yarn-per-job为例。flink提交作业是通过flink run进行提
【实战】OceanBase之OMS迁移Oracle至oceanbase
使用OMS迁移Oracle至oceanbase
RabbitMQ常见面试题及答案 90道（2021版）
RabbitMQ面试题以及答案整理【最新版】RabbitMQ高级面试题大全(2021版)，发现网上很多RabbitMQ面试题都没有答案，所以花了很长时间搜集，本套RabbitMQ面试题大全如果不背 RabbitMQ面试题的答案，肯定面试会挂！这套RabbitMQ面试题大全，希望对大家有帮助哈~博主已
问题解决：记录一次Linux服务器根目录突然爆满
服务器目录突然爆满；Docker 的overlayer2目录暴增；消息队列消费者程序未正确消费程序；日志
大数据框架之Hadoop：MapReduce（三）MapReduce框架原理——ReduceTask工作机制
ReduceTask工作机制
Hadoop mapreduce课程设计-全球历史平均气温数据分析
例如：随着大数据的不断发展，hadoop这门技术也越来越重要，很多人都开启了学习大数据之路。此次课程设计，我们采用mongodb作为存储，javaweb作为前端，echarts作为可视化工具，kettle和pandas作为数据清洗工具。使用底层mapeduce作为大数据计算。mongodb数据库：它
手机短信注册验证与登录功能
手机短信注册验证与登录功能
Flink系统架构
Flink 的运行时架构中，最重要的就是两大组件：作业管理器（JobManger）和任务管理器（TaskManager）。对于一个提交执行的作业，JobManager 是真正意义上的“管理者”（Master），负责管理调度，所以在不考虑高可用的情况下只能有一个；而 TaskManager 是“工作者
大数据高频面试题一：hive和Oracle的区别
从传统数据库转到大数据的必问题目
Python爬虫数据入库
Python爬虫数据导入数据库详细代码教程
Java整合Kafka实现生产及消费
Java整合Kafka。生产者参数配置、消费参数配置、生产自定义分区策略、生产到指定分区、设置offset根据时间戳获取 offset指定从头开始消费指定从某offset开始消费
高德新版全类别AOI采集与分析
AOI（Area of Interest），顾名思义，指的是互联网电子地图中的兴趣面，同样包含四项基本信息，主要用于在地图中表达区域状的地理实体，如一个居民小区、一所大学、一个写字楼、一个产业园区、一个综合商场、一个医院、一个景区或一个体育馆等等；有2022百度poi；交通网络分析，计算公交线路及站
XJTU-SY数据集轴承故障诊断
XJTU-SY数据集轴承故障诊断
springboot 用rocketmq实现批量消息，亲测可用
本地测试，一定要启动rocketmq ,否则报错。启动方式请百度。1.创建Springboot项目，添加rockermq 依赖2.配置rocketmq# 端口server:# 配置 rocketmqrocketmq:#生产者#生产者组名，规定在一个应用里面必须唯一#消息发送的超时时间 默认3000m
虚拟机Ubuntu安装Hadoop（伪分布式安装）
1.创建hadoop用户在终端输入为hadoop用户设置密码,连续输入两次密码即可为Hadoop用户增加管理员权限，避免以后的麻烦这里我们切换到hadoop用户，进行下一步操作2.ssh的安装以及设置免密登录检测ssh是否安装，有sshd说明已经启动这边我们还需要安装ssh server，这边又ye
eureka的搭建、配置、运行
eureka的搭建、运行（需要对eureka有一定的了解，主要是帮助你在新机快速搭建eureka）
Flink 通过批量和CDC两种方式读取MySQL数据入Iceberg
Flink JDBC 连接器允许使用 JDBC 驱动程序从任何关系数据库读取数据并将数据写入其中。本文档介绍如何设置 JDBC 连接器以针对关系数据库运行 SQL 查询。如果在 DDL 上定义了主键，则 JDBC sink 以 upsert 模式与外部系统交换 UPDATE/DELETE 消息，否则
Hadoop学习之SSH免密登录配置(以三台虚拟机为例，完全分布式)
HadoopSSH免密登录配置，完全分布式安装
DataX实现mysql全量数据同步到hdfs
DataX是阿里巴巴开源的一个异构数据源离线同步工具，致力于实现包括关系型数据 库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高 效的数据同步功能。
