深入探索【Hadoop】生态系统：Hive、Pig、HBase及更多关键组件（上）
本文深入探索了Hadoop生态系统的核心组成部分及其关键组件，特别是聚焦于Hive、Pig和HBase这三个重要工具。Hadoop作为大数据处理和分析的基石，通过其丰富的生态系统为企业和组织提供了强大的数据处理能力。首先，文章介绍了Hive，作为Hadoop上的数据仓库工具，Hive允许用户通过类S
DataGrip无法连接Hive 【已解决】
【代码】DataGrip无法连接Hive 【已解决】
通俗大白话讲大数据（新手筑基篇，中国移动实习）
数据采集传输：Flume、kafka、datax，maxwell，sqoop，logstash数据存储：mysql、hdfs、hbase、redis、mongodb数据计算：hive、spark、flink、storm、tez数据查询：presto、kylin、impala、druid、clickh
hive的优化策略
以 on,where 多条件字段顺序，建【多重】分区表，默认开启支持,以分区字段为条件筛选数据，tez引擎：动态分区剪裁支持。控制Mapper和Reducer数量，mapper的启动和初始化开销较大,【数量过多】导致开销大于逻辑处理,浪费资源。从表：不存在以NULL填充，where不能下推，on可以
hadoop数据仓库实战知识点
Sqoop 是一个用于在 Hadoop 和关系型数据库之间传输数据的工具支持从关系型数据库向 HDFS、Hive、HBase 等大数据组件的数据导入和导出。
Hive数据库项目搭建
重要。
Hadoop中HDFS、Hive 和 HBase三者之间的关系
Hive 类似于一个数据仓库，它建立在 HDFS 之上，提供了 SQL-like 的查询语言（HiveQL），让数据分析师和开发者可以用类似 SQL 的方式来查询和管理 HDFS 上的大数据。Hive 把复杂的 MapReduce 编程抽象掉了，让用户更专注于数据的业务逻辑，而不是底层的技术细节。：
干货分享|数据安全的重要性探索—— Hive 的安全机制
完整性是数据安全的核心，要保证数据的完整性，必须设置用户权限和数据密级。访问安全通常指用户访问数据的来源和方式是否安全可控，而数据系统又是 IT 系统的核心，其内容涉及主机、存储、网络等。数据备份指用户能否及时有效地备份和保全数据，以及在发生故障之后对数据进行恢复，有效地建立异地数据系统有助于保护数
(08)Hive——Join连接、谓词下推
Hive的Join连接
Hive-函数-窗口函数
Hive中常用的窗口函数（也称为开窗函数）丰富多样，这些函数能够在进行数据分析时提供强大的支持，特别适用于需要对分组数据进行复杂计算和排序的场景。
hive常见时间函数
获取当天时间的三种方式，注意格式，其中current_timestamp返回的时间为UTC时间。日期格式化函数，需要什么格式，后面写什么格式的日期字符串描述，to_date仅有一种格式返回结果。hive提供了灵活获取年、月、日、天、小时、分钟、秒、周数、星期几、季节的函数，最后面还。时区转换函数有很
Hive小文件问题及解决方案
Hive小文件问题是大数据环境中一个常见的挑战，影响了查询性能和资源利用率。通过了解小文件问题的成因和影响，并采取合适的解决方案，可以有效地缓解这一问题。在实际应用中，选择合适的文件格式、合并小文件、调整Hadoop配置参数以及使用分区和桶等方法，都是解决Hive小文件问题的有效手段。随着大数据技术
(超详细)备赛笔记 2024年全国职业院校（中职组）技能大赛（ZZ052大数据应用与服务）第一套试题 持续更新中!
(超详细)备赛笔记2024年全国职业院校（中职组）技能大赛（ZZ052大数据应用与服务）第一套试题 持续更新中!
记apache atlas导入hive元数据过程及问题处理
Apache atlas集成hive，导入hive元数据，导入过程中的问题处理
离线数据开发流程小案例-图书馆业务数据
hive 终端当前所处的数据库就是这个函数的默认存放数据库，例如：default，如果是在 default 数据库中创建的 udf，在 default 数据库中使用 udf 就可以不携带数据库前缀，如果是在其他数据库中使用这个函数，就需要使用指定这个函数所在的数据库前缀来使用这个函数，比如：sele
hive3.1.2的详细安装配置
因为hive3.1.2中的有些jar包和比hadoop版本中的jar包版本低，所以我们需要进行一个jar包的替换，把hive中的/hive/lib中的guava-19.0.jar包改名为guava-19.0.jar.bak并从/hadoop-3.1.3/share/hadoop/common/lib
从SQL到Hive，这些区别你记好
根据万字长文——最详Hive入门指南。
Hive Transaction事务表（含实现原理）
hive事务表
sheng的学习笔记-hive框架原理
Hive是基于Hadoop的一个数据仓库（Data Aarehouse，简称数仓、DW），可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。是用于存储、分析、报告的数据系统，常用作离线数据仓库Hive的本质是：将Hive SQL转化成MapReduce程序，其灵活性和扩展性比较好，支
基于hive数据库的泰坦尼克号幸存者数据分析
泰坦尼克号是当时世界上体积最庞大、内部设施最豪华的客运轮船，有“永不沉没”的美誉。然而不幸的是，在它的处女航中，泰坦尼克号便遭厄运——它从英国南安普敦出发驶向美国纽约。（1）列名介绍PassengerID->乘客IDSurvived->是否生还Pclass->船舱级别Name->姓名Sex->性别A
