Hadoop伪分布式安装教程
hivesever2的模拟用户功能，依赖于Hadoop提供的proxy user（代理用户功能），只有Hadoop中的代理用户才能模拟其他用户的身份访问Hadoop集群。因此，需要将hiveserver2的启动用户设置为Hadoop的代理用户，配置方式如下：修改配置文件。首先，在根目录下创建文件夹
hive客户端连接
主题：是一个抽象的概念，数据综合体，一个分析的主题可以对应多个数据源，在数仓的开展分析中，首先确定分析的主题，然后基于主题寻找，采集跟主题相关的数据。特点：服务于分析，要能应对海量数据的存储和数据计算，对于响应速度要求不高没我们很少修改数据，所以也不需要对数据的一致性，安全性进行考虑。ODS：源数据
修正版本 6.3.2 CHD 超详细！搭建本地大数据研发环境（16G内存+CDH）易错见红字
工欲善其事必先利其器，在经过大量的理论学习以后，需要有一个本地的研发环境来进行练手。已经工作的可以不依赖于公司的环境，在家也可以随意的练习。而自学大数据的同学，也可以进行本地练习，大数据是一门偏实践的学科，在找工作之前进行一些实践操作，也更利于对大数据知识的理解。本文将从头开始详细的记录整个大数据环
hive解析json_hive json解析函数
发知识点，真正体系化！**
Hive 之 UDF 运用（包会的）
Hive 支持两种 UDF 函数自定义操作，分别是：GenericUDF（通用UDF）：用于实现那些可以处理任意数据类型的函数。它们的输入和输出类型可以是任意的，但需要在函数内部处理类型转换和逻辑，可以实现更复杂的逻辑处理。UDF：用于实现那些只能处理特定数据类型的函数。每个 UDF 都明确指定了输
Hadoop复习（上）
系统启动，读取fsimage和edis至内存，形成内存元数据meta data， client向NameNode发起数据增删查请求，NameNode在接受请求后在内存元数据中执行操作，并返回结果给client,如果是增删操作，则同时记录数据操作日志edits。Container启动后，用于执行用户的
hive表基本语法
hive表基本语法
Hive中的复杂数据类型 - array、map、struct
Hive中的复杂数据类型，学会如何使用，如何指定字段为struct类型？如何向struct类型的字段中插入数据？如何取出struct字段中的值？
hive：insert into/overwrite插入分区详解
最近在做数据清洗的工作，从ods层到dwd层对数据进行标准化。有多张表需要汇入主题表，因为表中的字段比较多，况且也不统一，需要从指定字段拿数据，并且清洗，最后汇入主题表。PS：又结束了一天忙碌的工作，祝愿大家开心生活每一天。
hadoop格式化失败-拒绝连接
以上就是今天要讲的内容，本文仅仅简单介绍了格式化失败-拒绝连接的原因及解决办法，本文搭建的是hadoop的高可用集群经常会遇到的问题。Hadoop的高可用性：Hadoop的NameNode包括active和standby两种状态，通过故障转移机制（即当active NameNode意外终止时，快速启
hive的安装
hive的安装
hadoop HA菜鸟级别搭建教程
NameNode提供服务，两个NameNode存储的元数据是实时同步的，当Active的NameNode出现问题时，通过zk实时切换到Standby的NameNode上，并将Standby改为Active状态。这个是名为master的容器，将容器内的端口映射到主机上，分别将容器内的 8088、987
hive内置函数--floor,ceil,rand三种取整函数
返回一个0到1范围内的随机数。如果指定种子seed，则会返回固定的随机数。返回等于或者小于该double变量的最大的整数。返回等于或者大于该double变量的最小的整数。
VMware 虚拟机安装 Hadoop/Hive 集群详细教程 (Macbook M1/M2) (第一部分)
以安装 hadoop2 虚拟机作为例子Select ISO Image，选择宿主机上的镜像文件Select OS，选择 Debian10 操作系统Select install CentOS7，选择安装Select start up disk，选择硬盘Select GNOME GUI，选择安装桌面Se
hadoop学习---基于Hive的聊天数据分析报表可视化案例
聊天平台每天都会有大量的用户在线，会出现大量的聊天数据，通过对。
git拉取项目前需要操作哪些？
5.输入 $ cat ~/.ssh/id_rsa.pub 生成密钥，将密钥复制粘贴到(极狐GitLab是SSH密钥/gitee是SSH公钥)中，然后将生成的密钥放置在input框中。3.出现empty for no passphrase：(输入也可以不输入也可以) 然后按enter键。4.出现sam
在虚拟机中进入hive出现ConnectException拒绝连接
如果输入进入hive的命令后出现以下问题。
大数据技术｜第二章 Hadoop HDFS（分布式文件系统）
本“大数据技术”专题的文章基于B站“黑马程序员”的大数据技术系列课程（强推！黑马的课易懂且全面），作为自用的复习笔记。大家有需要也可以作为参考，但是由于刚入门大数据并且刚开始写博客，很多地方可能会缺乏一些细节或者存在一些问题，欢迎大家提出宝贵的建议和意见。
如果出现HIveServer2启动异常的解决方法
今天遇到了特别尴尬的事，hadoop集群没启动，今天启动hive的时候HiveServer2一直启动异常，试了好多遍都是这样，当时在网上搜了一下解决问题，有的是没配置hive启动脚本导致启动不成功，想了一下才知道启动hive的时候hadoop集群忘记启动了哈哈。有可能hadoop集群没开，也有可能没
Linux下Hadoop伪分布式安装及配置步骤
实现hadoop伪分布的配置，提供配置环境的搭建以及安装压缩包。
