数据仓库的分层
数仓分层理解-个人笔记
Hive之lead函数详解
根据chatgpt生成的回答
Hive的堵塞问题和表锁问题原因查找
当一个用户或任务需要对表进行修改（如插入、更新、删除等操作）时，Hive会自动获取一个表级锁，以防止其他用户或任务同时修改该表。排他锁适用于对表进行写操作，当一个用户或任务获取到了一个表的排他锁时，其他用户或任务将无法修改该表。如果一个用户或任务需要对表进行修改，但另一个用户或任务已经获取了表的锁，
从数据仓库到数据结构：数据架构的演变之路
数据治理（DG）：Experian数据质量报告表明，全球78%的组织受到数据治理不善的困扰，这导致人们对数据和从数据获得的洞察力产生不信任。数据治理告诉我们，在数据生命周期的任何时候，数据消费者都应该知道数据的位置、格式、使用关系以及与数据相关的任何其他相关信息，以避免数据债务。使数据成为可共享的资
离线数据仓库
数据中台：利用大数据技术，对海量数据统一进行采集、计算和存储、并统一数据标准和口径，该架构需要维护两套代码：离线架构代码和实时架构代码。随取随用、只有在使用时才进行数据转换等处理。数据中台：包含数据仓库和其他服务中间件。对原始数据进行清洗、转换和预处理。作为数据仓库或数据集市的数据源，更适合进行数据
Hive-数据倾斜
在计算各省份的GMV时，有可能会发生数据倾斜，解决办法如下：
hive 全量表、增量表、快照表、切片表和拉链表
切片表根据基础表，往往只反映某一个维度的相应数据。其表结构与基础表结构相同，但数据往往只有某一维度，或者某一个事实条件的数据。：记录每条信息的生命周期，当一条记录的生命周期结束，就会重新开始一条新的记录，并把当前日期放入生效开始日期。3）合并变动数据和旧拉链表数据（有更新的信息需要修改生效结束日期，
数据仓库系列：StarRocks 下一代高性能分析数据仓库的架构、数据存储及表设计
本文是学习StarRocks的读书笔记，让你快速理解下一代高性能分析数据仓库的架构、数据存储及表设计。
数据库横表和竖表有什么区别
横表和竖表是描述数据库表结构的两种形式，它们之间的主要区别在于数据的组织方式和用途。2.竖表（长表）： 竖表是一种非常规表结构，其特点是将属性作为行而不是列存储。竖表通常包括实体ID、属性名和属性值三个字段。竖表的优点是可以处理稀疏数据和动态添加属性，适合用于数据仓库和数据挖掘。
Hive数据仓库
数仓作为面相分析的数据平台，其主职工作就是对存储在其中的数据开展分析，那么如何读取数据分析呢？理论上来说，任何一款编程语言只要具备读写数据、处理数据的能力，都可以用于数仓的开发。比如大家耳熟能详的C、java、Python等；关键在于编程语言是否易学、好用、功能是否强大。遗憾的是上面所列出的C、py
SQL Server 2014 各版本介绍
目前，SQL Server 2014 分为主要版本和专业版。
【数据仓库】Windows源码安装DataEase，DataEase二次开发
【数据仓库】Windows源码安装DataEase，DataEase二次开发
国科大数据挖掘课程HW1
也许某一年会有人需要用到？
doris配置hive的catalog
查询hive的database。创建hive的catalog。
腾讯云对象存储联合DataBend云数仓打通数据湖和数据仓库
伴随多场景的成功落地，腾讯云对象存储打造基于云技术的湖仓一体解决方案。将数据仓库构建在数据湖上，打通数据仓库和数据湖两套体系，构建以数据湖为中心，融合数据仓库、大数据、AI等技术的生态体系，既有数据湖的灵活性和可扩展性，又有数据仓库的数据管理功能。
Kettle变量和参数介绍系列文章3-循环的轻松实现
本文详细说明两种实现循环操作的方法，0编程经验的人也可以看懂，使用Kettle做数仓工具的可以看一下。
九、数据仓库详细介绍（元数据）
元数据（Meta-data）是描述数据的数据（The data about data），更准确点应该叫 The information abut data。如何理解这句话？就是描述信息、实体、系统的数据。举几个例子175，大家有概念吗？如果我说这是一个男孩儿的身高大家是不是就懂了。如果我再加一个他才
常用的Prestosql
常用的Prestosql
【从0开始离线数仓项目】——数据仓库的环境搭建（1）
Linux的环境变量可在多个文件中配置，如/etc/profile，/etc/profile.d/*.sh，~/.bashrc，~/.bash_profile等，下面说明上述几个文件之间的关系和区别。
【Hive-Partition】Hive添加分区及修改分区location
【Hive-Partition】Hive添加分区及修改分区location
