Hive的数据库表操作以及数据上传
关于hive的安装、基本的知识，以及hive中数据库表操作等学习练习笔记
Hive SQL-DML-insert插入数据
insert
k8s中部署hive，包括客户端及服务端
推送好之后，在cube studio平台上，新建一个pipeline，使用自定义镜像模板，填写镜像为ccr.ccs.tencentyun.com/cube-studio/hadoop-hive:v3.3.2-3.1.3，debug，检查目录对不对，检查环境变量是否正确，在命令行输入hive命令，看是
EXCEL数据导入HIVE
四、将test.txt文件上传至虚拟机的Linux环境中，同时在hive里新建Test数据表（已经建库），输入建表语句的时候务必注意对应字段的类型必须相同。本文将论述如何将Windows本地的excel表数据，导入到虚拟机Linux系统中的Hadoop生态中的Hive数据仓库中。至此，完成excel
【理论】Hive SQL和SQL的常用语法及区别
插入数据：`INSERT INTO table_name (column1, column2, ...) VALUES (value1, value2, ...);- 创建表：`CREATE TABLE table_name (column1 data_type, column2 data_type
【Hive SQL 每日一题】统计最近1天/7天/30天商品的销量
虽然这种方法可以算出结果，但是效率很低，我们需要算三次然后再进行合并，数据量一大的时候那就太慢了，那么有没有更好的方法呢？通过这种方法，我们不再需要写三个子查询然后再进行合并，一个查询即可搞定，提高了整体的运行速度。条件进行过滤，它只会保留符合要求的数据，同样也不会对我们的结果造成影响。行数据，即使
Hadoop集群模式中Sqoop数据迁移从mysql到hive报错找不到数据库
因为搭建的是Hadoop集群模式，执行时会将Sqoop命令发送到集群中的其他主机中去执行，但是其他集群中并没有相应的mysql数据库，也就是找不到"目标数据库‘test1’"这个报错；执行Sqoop命令后，报错无法找到目标数据库，显示导入失败，但hive中却真实导入了部分数据，属于是半成功。Sqoo
基于CDH 6.3.0 搭建 Hive on Spark 及相关配置和调优
但是这样有个问题是当集群有多个用户运行Hive查询时会有问题，应避免为每个用户的会话分配固定数量的executor，因为executor分配后不能回其他用户的查询使用，如果有空闲的executor，在生产环境中，计划分配好executor可以更充分的利用Spark集群资源。启动并发GC周期时的堆内存
hive 之 UDTF 之 explode 函数 和 lateral view 侧视图（原理）
hive 之 UDTF 之 explode 函数 和 lateral view 侧视图（原理）
Hive 分区
加载数据：Linux 中写：hadoop fs -put ‘linux文件路径’ ’文件要上传的路径，一般为要映射的表所在的路径’DataGrip中写：Load data local inpath ‘Linux的文件路径’ into table 表名;Load data inpath ‘HDFS中
Hive常用内置函数合集
Hive常用函数合集
Hive/Spark窗口函数
结果中，对于每一行的last_value的结果都是当前值，并不分区中按salary升序的最后一个值。前面在提到last_value时，特意强调了该函数的结果并不是分区中的最后一个值，结合上述介绍的window specification再来看下该函数的结果值。注意，默认情况下last_value取的
Hive表使用ORC格式和SNAPPY压缩建表语句示例
在选择压缩算法时，一般可以考虑以下几个因素： 1. 压缩比：不同的压缩算法具有不同的压缩比，一般来说，压缩比越高，存储空间占用越小，但可能会影响查询性能。 2. 压缩速度：有些压缩算法压缩速度较快，适合对数据进行频繁压缩，而有些压缩算法压缩速度较慢，但压缩比较高。 3. 解压速度：压缩算法解压速度也
Hive Beeline 配置
Beeline作为Hive的客户端工具，它支持两种模式：嵌入式模式（embedded mode）和远程模式（remote mode）。在嵌入式模式下，Beeline可以直接在HiveServer2的JVM中运行HiveQL脚本，而在远程模式下，Beeline可以在其他机器上运行并通过网络连接到Hiv
Hive 高可用分布式部署详细步骤
hive高可用分布式部署详细教程
离线数仓数据导出-hive数据同步到mysql
为方便报表应用使用数据，需将ads各指标的统计结果导出到MySQL数据库中。datax支持hive同步MySQL：仅仅支持hive存储的hdfs文件导出。所以reader选hdfs-reader，writer选mysql-writer。null值 在hive和mysql里的存储格式不一样，需要告诉D
福州大学苏立超老师《大数据库系统》第六章复习提纲“hive”
福州大学苏立超老师《大数据库系统》第六章复习提纲“hive”
大数据快速搭建环境 CDH QuickStart VM虚拟机版本安装
CDH QuickStart VM虚拟机版本安装
Hive 使用 LIMIT 指定偏移量返回数据
LIMIT 子句可用于限制SELECT语句返回的行数。LIMIT 接受一个或两个数字参数，这两个参数必须都是非负整数常量。第一个参数指定要返回的第一行的偏移量（从Hive 2.0.0开始），第二个参数指定要返回的最大行数。当只提供一个参数时，它表示最大行数，偏移量默认为0。
