Hive窗口函数
在 Apache Hive 中，窗口函数是一种特殊类型的函数，它允许你在查询中对分区数据执行复杂的分析。窗口函数在标准 SQL 中可用，Hive 作为 Apache Hadoop 的一个组件，也支持这些功能。以下是一些常见的窗口函数以及如何在 Hive 中使用它们的示例。
数据仓库之离线数仓
离线数据仓库（Offline Data Warehouse）是一种以批处理方式为主的数据仓库系统，旨在收集、存储和分析大量历史数据。离线数据仓库通常用于定期（如每日、每周、每月）更新数据，以支持各种业务分析、报表生成和数据挖掘任务。
图书馆数据仓库
主机名 数据库。图书类别表 dim_books_type 5条。用户表 t_user_info 38条数据。借书表 t_borrow_info,hdfs上的数据库位置。包含 图书表 t_book_info,-- sqoop导出数据到mysql。导入dim_books
HIVE基本数据类型
HIVE基本数据类型
Hive 函数
UDF（User-Defined-Function） 普通函数，一进一出；例如：round 这样的函数；UDAF（User-Defined Aggregation Function）聚合函数，多进一出；例如：count、sum 这样的函数；UDTF（User-Defined Table-Genera
数据仓库中的数据治理
数据仓库中的数据治理，包括定义和流程，并探讨为什么数据治理对于数据仓库的成功至关重要。
Hive自定义函数编写方法（含源代码解读，超详细，易理解）
Hive创建自定义函数的逻辑并不难，只需继承相关类，实现相关方法，打成jar包上传集群即可。但在代码编写阶段有一定难度，需要一定的java基础。t=N7T8。
hive之full outer join（全连接）使用
hive之full outer join（全连接）使用
数据仓库之StarRocks
Palo，中国的互联网公司百度开发并开源的，后更名为doris。StarRocks是一款由doris的一个分支演化而来的、开源分布式列式存储数据库。旨在提供高性能、高可靠性和低延迟的大数据分析和查询服务。
hive数据仓库项目练习
hive数据仓库项目练习
Hive数据仓库建模理论
粒度定义意味着对各事实表行实际代表的内容给出明确的说明。粒度传递了同事实表度量值相联系的细节所达到的程度方面的信息。它给出了后面这个问题的答案:“如何描述事实表的单个行?粒度定义是不容轻视的至关重要的步骤。在定义粒度时应优先考虑为业务处理获取最有原子性的信息而开发维度模型。原子型数据是所收集的最详细
数仓工具—Hive语法之数组函数用法和示例
之后，您可以使用数组操作函数来操作数组类型。数组函数将自然语言文本的字符串分割成单词和句子，每个句子在适当的句子边界处断开，并作为单词数组返回。函数根据数组元素的自然排序对输入数组进行升序排序并返回。例如，考虑以下示例对数组字符串进行排序并返回排序后的数组。例如，以下示例仅从键值对 map 类型中返
一文看懂：数据湖、数据仓库、数据中台，浅显直白！
数据湖是一种用于存储大量原始数据的存储系统，它可以容纳各种类型的数据，包括结构化数据、半结构化数据和非结构化数据。数据湖的设计目的是为了能够存储大规模的数据，并且能够支持多种数据处理和分析工具的访问和使用。数据湖通常不会对数据进行预先的清洗、转换和整合，而是以原始的形式存储数据。这使得数据湖能够更好
SQLServer的奇幻图书馆：数据仓库与ETL
数据仓库就像是这样一个图书馆，它存储了大量的历史数据，这些数据经过精心组织，便于我们进行分析和决策。亲爱的数据探险家们，我们的奇幻图书馆之旅就要结束了。希望你们在这次旅程中，不仅学到了数据仓库和ETL的知识，还感受到了探索数据世界的乐趣。记住，数据不仅仅是数字，它们是故事，是洞见，是决策的力量。继续
实时数仓-电商数据仓库系统
作为集合元素，查询结果的每一行对应一个实体类对象，将所有对象封装到 List 集合中，返回给方法调用者。
hive 数仓开发实战
对于一个公司或者组织来说，使用数据的用户可能成百上千，如何降低大家对于数据使用的沟通成本、如何通过规范大家的行为来降低使用数据的风险，这些问题是必须加以考虑的。作为新的大数据架构，数据湖采集和存储一切数据，既包含结构化的数据也包含非结构化（如语音、视频等）和半结构化的数据（如JSON 和XML 等）
hive修改表字段数据类型
注：在执行操作时，你需要确保数据类型转换是安全的，即数据能够在新的数据类型下准确地表示。：在更改数据类型之前，请确保数据的值与新数据类型兼容。：如果你的应用程序依赖于这个Hive表，更改数据类型可能需要你更新应用程序的代码。：如果你正在修改一个分区表的列类型，并且希望这个更改应用到所有分区上，可以使
数仓工具—Hive语法之正则表达式函数
在我的其他文章中，我们已经看到了如何使用Hive正则表达式从字符串中提取日期值。正则表达式的另一个常见用途是提取数值，例如从字符串数据中提取区号或电话号码。当您处理不同的数据源时，可能需要从给定的字符串类型列中提取数字值，如电话号码或区号。例如，考虑下面的Hive示例，使用函数中的不同表达式从字符串
Hive基础知识（六）：Hive 配置运行日志信息、打印当前库和表头、参数配置方式
另外，Hive 也会读入 Hadoop 的配置，因为。
hive线程数详解
hive.server2.async.exec.threads 默认100，设置计算线程的数量。hive.exec.input.listing.max.threads 默认值为15，Hive用来监听输入文件的最大线程数。hive.server2.async.exec.wait.queue.size
