ODPS 之SQL
SQL语法
beeline连接hive的导出数据格式的参数及设置
beeline连接hive的导出数据格式的参数及设置
Hive实战练习（包含数据集）
（1）要想统计 Music 类别中的视频热度 Top10，需要先找到 Music 类别，那么就需要将category 展开，所以可以创建一张表用于存放 categoryId 展开的数据。所以如果要 group by 类别，需要先将类别进行列转行(展开)，然后再进行 count 即可。（2）我们需要按
大数据技术笔试题库
一、单选:1、下列选项中，执行哪一个命令查看Linux系统的IP配置。A、ipconfigB、findC、ifconfigD、arp -a2、在MapReduce程序中，map()函数接收的数据格式是（）。A、字符串B、整型C、LongD、键值对3、下列选项中，关于HDFS的架构说法正确的是（）。A
sqoop入门简介 | 安装部署 | sqoop案例展示
ETL工具sqoop文章目录ETL工具sqoopsqoop简介sqoop安装sqoop常用命令sqoop案例sqoop简介Sqoop(发音：skup)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递，可以将一个关系型数据库（例如
HIve安装配置（超详细）
文章目录Hive安装配置一、Hive安装地址二、Hive安装部署1. 把 `apache-hive-3.1.2-bin.tar.gz`上传到Linux的/export/software目录下2. 解压`apache-hive-3.1.2-bin.tar.gz`到/export/servers/目录下
Spark-SQL连接Hive 的五种方法
Spark-SQL连接Hive 的五种方法
Hudi-集成 Hive
一般来说 Hudi 表在用 Spark 或者 Flink 写入数据时会自动同步到 Hive 外部表（同6.2）， 此时可以直接通过 beeline 查询同步的外部表，若写入引擎没有开启自动同步，则需要手动利用 hudi 客户端工具 run_hive_sync_tool.sh 进行同步，具体后面介绍。
hive 随机抽样 distribute by rand() sort by rand() limit n
hive表随机抽样 distribute by rand() sort by rand() 以及分层抽样
实验6 熟悉Hive的基本操作
一、实验目的（1）理解Hive作为数据仓库在Hadoop体系结构中的角色。（2）熟练使用常用的HiveQL。二、实验平台操作系统：Ubuntu18.04（或Ubuntu16.04）。Hadoop版本：3.1.3。Hive版本：3.1.2。JDK版本：1.8。三、数据集由《Hive编程指南》(O’Re
Hive数据分析实验报告
用户行为日志user_log.csv，日志中的字段定义如下：（1）查看user_log表数据结构（2）查看user_log表简单数据结构（3）查看日志前10个交易日志的商品品牌（4）查询前20个交易日志中购买商品时的时间和商品的种类（5）用聚合函数count()计算出表内有多少条行数据（6）在函数内
Hive SQL 中 map, reduce 的数据血缘分析
在数据血缘分析中对这些 Hive SQL 特有的 SQL 语法的支持，是马哈鱼数据血缘关系分析工具和一般数据血缘分析工具的一个重要区别，对这些特殊 SQL 语法的支持，为企业的数据治理提供了完整的数据血缘，可以更好的提高数据质量，让企业的海量数据的在数据挖掘和智能分析中发挥更大的作用。如果你正在使用
Docker | docker安装MySQL
一文带你使用Docker安装MySQL，过关斩将。
Linux虚拟机安装Hive(mysql安装)
Hive发展至今，总共历经了两代客户端工具第一代客户端（deprecated不推荐使用）：$HIVE_HOME/bin/hive, 是一个 shellUtil。主要功能：一是可用于以 交互或批处理模式运行Hive查询；二是用于Hive相关服务的启动，比如metastore服务。第二代客户端（reco
Hive之grouping sets用法详解
比如(class, course), 二进制为 101，十进制则为5，则grouping__id为5，同理grouping__id为6，则组合为（sex,course），二进制为110；比如 group by class,sex,course,则二进制的顺序为：course sex cl
【hadoop——Hive的安装和配置】保姆式教学
目录一.Hive的安装和配置1.Hive并不是hadoop自带的组件，因此我们需要去下载hive，此次课我们使用hive 1.2.1版本，下载地址为：2.下载完成之后，安装包默认保存在下载文件夹中，解压安装包apache-hive-1.2.1-bin.tar.gz至路径 /usr/local，命令如
hive大作业-餐饮外卖平台数据分析
1、背景W餐饮外卖平台向广大用户提供网上订餐服务，其市场占有量在近年不断增加。当用户在W平台订餐完成后，平台会引导用户对于品尝过的菜品进行评价打分，最高为5分，最低为1分。通过用户的评分数据，可以分析外卖平台的受欢迎度、客户的体验度。数据说明用户评分数据（mealrating.txt） 属性名称
Hive字符串转日期细节
Hive日期函数的使用注意事项，date_format() ;to_date(); from_unixtime(unix_timestamp())的使用案例
Hive元数据信息获取
放到mysql中存储，mysql中默认表被创建的时候用的是默认的字符集(latin1)，所以会出现中文乱码。（2）修改hive-site.xml中Hive读取元数据的编码（注意原先是否配置过）注意的是，之前创建的表的元数据已经损坏了，所以无法恢复中文乱码，只能重新创建表。
一百零六、Hive312的计算引擎由MapReduce(默认)改为Spark（亲测有效）
Hive312的计算引擎由MapReduce(默认)改为Spark
