头歌—Hive的安装与配置
头歌—hive的安装与配置
apache-hive-3.1.2-bin 安装
1. hadoop、hive、flink等目前版本基本依赖于jdk1.8, 所以需要专门的JDK环境，毕竟现在大多开发者都是使用>=11版本了。2. windows 系统建议使用VMware通过新建虚拟机安装，适用windows的版本在安装中配置、安装后使用都会挺麻烦(权限、cmd启动脚本、切换开发
Hive 特殊的数据类型 Array、Map、Struct
获取数组值的方式和我们在 Java 中一样，采用下标的方式访问，当访问的下标超过数组的长度时，并不会报错，它会返回。这里值 Value 中存在整型和字符型数据类型不统一的情况，它会统一将值 Value 都转换成字符型。Map 是 KV 键值对类型，其中存储的字段数量可多可少，但是 KV 键值对的数据
【Hadoop】--基于hadoop和hive实现聊天数据统计分析，构建聊天数据分析报表[17]
BI：Business Intelligence，商业智能。指用现代数据仓库技术、线上分析处理技术、数据挖掘和数据展现技术进行分析以实现商业价值。简单来说，就是借助BI工具，可以完成复杂的数据分析、数据统计等需求，为公司决策带来巨大的价值。所以，一般提到BI，我们指代的就是工具软件。FineBISu
Hive中的NVL函数与COALESCE函数
说明： COALESCE是一个函数， (v1, v2, …,vn)依次参考各参数表达式，遇到非null值即停止并返回该值。如果所有的表达式都是空值，最终将返回一个空值。Hive SQL 中的一种聚合函数，它可以返回第一个非空值。功能：如果value为NULL，则NVL函数返回。如果两个参数都为NUL
Hive中的CONCAT、CONCAT_WS与COLLECT_SET函数
concat用于连接字符串。concat_ws用于按照指定的分隔符连接字符串。与group by和concat_ws一起使用可以实现"列转行。
孙悟空被压500年也想不出看文档瞬间就会scala和spark以及hadoop
export HADOOP_CONF_DIR=/usr/local/src/hadoop/etc/hadoop #指定hadoop路径。解压tar -zxvf /opt/software/hadoop-2.7.1.tar.gz -C /usr/local/src。export HADOOP_HOME
震惊Hadoop伪分布式+spark+scala竟如此简单！
验证hdfs：可以登录浏览器地址：192.168.20.11:50070 （ip地址是master的地址）export JAVA_HOME=/opt/jdk #这里是opt目录。修改 hdfs-site.xml 将dfs.replication设置为1。在最后加上export JAVA_
【大数据】Hadoop下载安装及伪分布式集群搭建教程
一文详解hadoop下载安装以及伪分布式集群搭建教程
基于Hadoop和Hive的聊天数据（FineBI）可视化分析
Fine BI支持Hadoop Hive数据源，可以直接连接Hive进行数据查询和可视化，且提供多种图表类型，包括折线图、柱状图、饼图等，满足用户不同的数据展示需求。本文将通过FineBI将hadoop和hive联系起来对聊天数据进行可视化报表分析
Hive on Tez 性能优化
Hive on Tez 性能优化优化Hive on Tez查询永远不能以一种万能的方法来完成。查询的性能取决于数据的大小、文件类型、查询设计和查询模式。在性能测试期间，要评估和验证配置参数和任何SQL修改。建议在工作负载的性能测试期间一次进行一项更改，并且最好在生产环境中使用它们之前评估调整更改在您
hadoop-yarn简介及常用命令详解（超详细）
本文详细介绍了YARN的概述、架构、特点和原理，并提供了常用命令的详细解释。YARN作为Hadoop生态系统中的重要组件，具有分布式资源管理、多框架支持、灵活的资源调度、高可靠性和容错性、可扩展性以及安全性等特点。通过合理使用YARN命令，可以更好地管理和监控YARN应用程序和集群，提高大数据处理和
Hive期末测试题（头歌）
头歌实验-Hive期末测试题
Hadoop介绍：什么是Hadoop？了解Hadoop的应用
Hadoop是一个功能强大、灵活多变的大数据处理框架，它在许多领域都有着广泛的应用前景。随着技术的不断发展和完善，Hadoop将继续为企业和组织提供高效、可靠的大数据解决方案。
Hive &mysql
Hive 由 Facebook 实现并开源，是基于 Hadoop 的一个数据仓库工具，可以将结构化的数据映射为一张数据库表，并提供 HQL(Hive SQL)查询功能，底层数据是存储在 HDFS 上。Hive的本质是将 SQL 语句转换为 MapReduce 任务运行，使不熟悉 MapReduce
大数据分析设计-基于Hadoop运动项目推荐系统
2.2功能需求分析运动项目推荐系统的主要目的分为三个。首先：可以通过该系统可以很好的整合和发布体育项目的相关信息。以前通过传统的项目查询以及体验反馈的方式有个最大的问题就是信息查询、反馈方式繁琐，而且各种信息容易丢失，有了这样一个运动项目推荐系统，那么则可以很容易的把所有的运动项目信息都放到数据库中
hadoop 3 完全分布式+历史服务器
hadoop 3 完全分布式+历史服务器
[2021]Zookeeper getAcl命令未授权访问漏洞概述与解决
今天在漏洞扫描的时候蹦出来一个zookeeper的漏洞问题，即使是非zookeeper的节点，或者是非集群内部节点，也可以通过nc扫描2181端口，获取极多的zk信息。关于漏洞的详细描述参考apache zookeeper官方概述：CVE-2018-8012: Apache ZooKeeper Qu
hive 简简单单易如反掌
1. 实验一：Linux操作系统环境设置实验环境 本实验所需之主要资源环境：资源环境 服务器集群 单节点，机器最低配置：双核 CPU、8GB 内存、100G 硬盘 运行环境 CentOS 7.4 服务和组件 服务和组件根据实验需求安装。
hive的简单认识
今天写的比较急，先凑活看，有空的话再完善一下
