【hive】- 使用insert into/insert overwrite插入数据到静态分区、动态分区、动静态分区
使用insert into/insert overwrite插入数据到静态分区、动态分区、动静态分区
hiveSql解析DolphinScheduler调度系统7位crontab表达式
先说下我们数仓大致的数据链路。各个业务系统的数据库 -> hive -> doris -> 报表/邮件/系统hive里ods层几乎所有的数据都依赖于从业务库拉取，但是偶尔也难以避免的会遇到拉取失败或者集群（主要是业务库）宕机的情况，导致ods层数据大批量的拉取失败，从而影响到dwd层、dws层、ad
Hive权限管理
基于存储的授权 - 可以对Metastore中的元数据进行保护，但是没有提供更加细粒度的访问控制（例如：列级别、行级别）。基于SQL标准的Hive授权 - 完全兼容SQL的授权模型，推荐使用该模式。hive默认授权 - 设计目的仅仅只是为了防止用户产生误操作，而不是防止恶意用户访问未经授权的数据。
[hive] sql中distinct的用法和注意事项
在 Hive SQL 中，DISTINCT用于去重查询结果中的行。它返回唯一的行，消除结果集中的重复项。以下是DISTINCT。
Dbeaver，Hudi，Hive，Spark，Presto应用问题及解决措施梳理
Dbeaver，Hudi，Hive，Spark，Presto应用问题及解决措施梳理
Hive-SQL语法大全
]，表示可选，如上[LOCATION]表示可写、可不写，表示或，如上ASC | DESC，表示二选一…，表示序列，即未完结，如上表示在SELECT后可以跟多个，以逗号隔开()，表示必填，如上(A | B | C)表示此处必填，填入内容在A、B、C中三选一。
Hive初体验
{runjar就是metastore；hadoop要先启动 }进入到Hive Shell 环境中，可以直接执行SQL的语句；首先，确保启动了Metastore服务。
【Hive_05】企业调优1（资源配置、explain、join优化）
Explain呈现的执行计划，由一系列Stage组成，这一系列Stage具有依赖关系，每个Stage对应一个MapReduce Job，或者一个文件系统操作等。stage可以对应mr，也可以对应文件系统操作。因为不是所有的sql语句的底层都是mr。比如说load语句，底层就不是mr而是文件系统操作。
如何使用 Hive 进行自然语言处理
1.背景介绍自然语言处理(NLP，Natural Language Processing)是人工智能领域的一个重要分支，其主要目标是让计算机能够理解、生成和翻译人类语言。自然语言处理涉及到语音识别、语义分析、语料库构建、情感分析等多个方面。随着大数据技术的发展，自然语言处理领域中的数据量越来越大，传
【系统学习Hive常用知识】
Hive是由Facebook开源，基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。创建数据库创建表（1）内部表与外部表Hive中默认创建的表都是的内部表，有时也被称为管理表。对于内部表，Hive会完全管理表的元数据和数据文件。创建内部表id int,创
SparkSQL和Hive语法差异
rand()nullvoidCTAS建表。
explode与lateral view使用详解（spark及hive环境对比）
explode函数能够将array及map类型的数据炸开，实现一行变多行。
分布式数据库·Hive和MySQL的安装与配置
一、版本要求：Hadoop:hadoop-2.10.1、MySQL：mysql-8.0.35、HIVE：apache-hive-3.1.2、MySQL驱动：mysql-connector-java-5.1.49。
Apache Hive 简介
以上就是Hive的简介！下期预告~ HiveSQL 的DQL 操作。
Hive实战：词频统计
在本次实战任务中，我们的目标是在大数据环境下利用Hive工具进行词频统计。以下是详细步骤和关键操作的优化描述：test.txtt_word。
Hive09_函数
split( “category” , “,”) -----> [ “悬疑” ， “动作”, “科幻”, “剧情” ] array。果 value 为 NULL，则 NVL 函数返回 default_value 的值，否则返回 value 的值，如果两个参数。NVL：给
Hive运算符和函数
实现三个方法：initialize初始化、evaluate实现功能、帮助文档initialize方法只处理类型，就是在select 函数的时候，反序列化读取数据时，需要确认数据以什么类型返回的；evaluate方法只处理真实数据。/****/// 定义出读取出的文件类型/*** 初始化只用来
【SparkSQL】基础入门（重点：SparkSQL和Hive的异同、SparkSQL数据抽象）
本文重点介绍Spark SQL的定义、特点、发展历史、与hive的区别、数据抽象、SparkSession对象。
【数据仓库与联机分析处理】数据仓库工具Hive
Hive是基于Hadoop的一个数据仓库工具，十分适合对数据仓库进行统计分析。本篇文章介绍Hive的安装配置以及配置Hive元数据存储到MySQL。
关于hive on spark部署后insert报错Error code 30041问题
其中，Spark Executor内存是Spark配置中设置的executor总内存，包括堆内存和非堆内存。总内存 = Spark Executor内存 + Spark Executor的JVM堆内存 + Spark Executor的JVM非堆内存。1). 将/opt/module/spark/c
