Hive（21）：DML之Update、Delete更新、删除数据
首先，必须明确，你理解的Hive这款软件，定位是什么？是面向事务支持事务的RDBMS?还是面向分析，支持分析的数据仓库。这很重要。Hive是基于Hadoop的数据仓库，面向分析支持分析工具。因此在Hive中常见的操作的就是分析查询select操作。将已有的结构化数据文件映射成为表，然后提供SQL分析
Hive-时间日期&trunc-日期与数字截取函数
TRUNC函数为指定元素而截去的日期值。其具体的语法格式如下：TRUNC（date[,fmt]）1、current_timestamp() -- 获取时间 2022-10-09 16:00:24.1892、unix_timestamp() -- 获取时间戳 16653024983、select
Kettle的安装以及简单使用
ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程，目的是将企业中的分散、零乱、标准不统一的数据整合到一起，为企业的决策提供分析依据， ETL是BI（商业智能）项目重要的一个环节。下载好后将文件解压，将里面的 mysql-connector-java-8.0.28.jar 放到，ke
kettle-读取共享对象时发生一个严重错误
kettle 创建转换时发生一个严重错误
hive设置本地执行方式
假如hive中的SQL语句执行时间太长，可以设置本地执行方式，设置本地执行模式可以优化执行速度，数据量小的时候，使用本地模式：。以上这些配置，都可以写在 hive 的conf 下的 .hiverc 文件中，当hive启动的时候，就会加载。在hive的配置文件 hive-env.sh中将一些配置注释
大数据技术之Hadoop学习(七)——Hive数据仓库
Hive数据仓库的认识与操作
从0到1搭建数据仓库流程
数仓搭建流程
Hive--清除/删除Hive表数据
大数据技术指的是用于处理、分析和管理大规模数据集的技术和工具。随着互联网和物联网的普及，数据量不断增大，对数据的处理和分析需求也日益增加，大数据技术应运而生
Hive（23）：Select高级查询之SORT/ORDER/CLUSTER/DISTRIBUTE BY
order by会对输入做全局排序，因此只有一个reducer，会导致当输入规模较大时，需要较长的计算时间。sort by不是全局排序，其在数据进入reducer前完成排序。因此，如果用sort by进行排序，并且设置mapred.reduce.tasks>1，则sort by只保证每个reduce
大数据期末考试选择填空重点内容HNUST（1-4章 7，10章多刷题）
（2）每个块都向HDFS集群中的名称节点发起写请求，名称节点会根据系统中各个数据节点的使用情况，选择一个数据节点列表返回给客户端，然后客户端就将数据首先写入列表中的第一数据节点，同时将列表传给第一个数据节点，当第一个数据节点接收到4KB数据时，写入本地，并且向列表中的第二个数据节点发起连接请求，将自
数仓学习---15、数据仓库工作流调度
数据仓库工作流调度
六、数据仓库详细介绍（ETL）经验篇
日常工作中大多数时候都是在做数据开发，ETL 无处不在。虽然最近两年主要做的大数据开发，但感觉日常干的这些还是 ETL 那点事儿，区别只是技术组件全换了、数据量大了很多。前几年数仓势微，是因为传统的那些工具数据库等无法解决数据量进一步膨胀带来的计算问题，大数据火爆也是因为当时大数据开发门槛很高。可是
Hive窗口函数-lead/lag函数
Hive窗口函数-lead/lag函数
Kettle（8）：删除组件
删除组件能够按照指定条件，将表中的数据删除。
为什么要搭建数据仓库
数据是企业中最重要的资源之一，因此，随着企业数据量的不断增大和复杂度的提高，建立一个可靠和健全的数据仓库变得越来越重要。在数聚股份看来，一个数据仓库可以作为一个企业数据存储和管理系统，能够更有效地存储、管理和分析数据。那么，为什么要搭建数据仓库呢？
解决Hive视图View数据乱码的问题
解决Hive视图View数据乱码的问题
Hive（25）：Select高级查询之Subqueries子查询
1 from子句中子查询在Hive0.12版本，仅在FROM子句中支持子查询。而且必须要给子查询一个名称，因为FROM子句中的每个表都必须有一个名称。子查询返回结果中的列必须具有唯一的名称。子查询返回结果中的列在外部查询中可用，就像真实表的列一样。子查询也可以是带有UNION的查询表达式。Hive支
数据中台OneID：详解ID-Mapping！
ID-Mapping，一文搞定
sql数据类型映射与数据类型转换
MaxCompute 2.0新增了DECIMAL类型与DATETIME的常量定义方式，100BD是数值为100的DECIMAL，2017-11-11 00:00:00是DATETIME类型的常量。关于CAST的介绍请参见CAST。关系运算符包括=、<>、<、<=、>、>=、IS NULL、IS NO
Hive 中的爆炸函数（ lateral view 与 explode 用法）
hive中的爆炸函数（ lateral view 与 explode详解），本篇文章主要针对实际应用中的情况，进行讲解
