hive 分桶文件的大小多大最合适
另一方面，如果某个列包含许多唯一值，例如包含顾客 ID 的列，这可能不是一个好的分桶字段，因为这可能会导致分桶数量过多，从而降低查询效率。在 Hive 中，选择分桶字段时，考虑到分桶字段的值将被用于对数据进行分区，因此选择较少离散值的列作为分桶字段可以提高查询效率。同时，指定适当的分桶数也很重要，应
hadoop之kerberos权限配置（ranger基础上）（三）
kerberos+ranger+kerberos权限控制
Hadoop的基本概念和架构
Hadoop是由Apache基金会所发布的开源的分布式计算框架，由Java语言编写，主要用于处理大规模的数据集的处理和分析。它基于Google的MapReduce算法和Google文件系统（GFS）的思想，提供了一个可靠，高效，可扩展的分布式计算平台。 Hadoop的核心组件包括HDFS（
头歌大数据——MapReduce 基础实战 答案 无解析
头歌大数据——MapReduce 基础实战 答案 无解析
Zookeeper简介、原理和功能？
zookeeper的简介、原理、总体架构
Hive、Hbase、TiDB、Gbase的区别
在数据库不断发展的今天，尤其是大数据技术的发展，不断的涌现出各种海量数据存储及分析的数据库及相关工具令人演化缭乱，有的基于Hadoop构建，有的基于分布式理论自行构建，但是这些工具和数据库之间究竟有什么区别，都使用于什么场景，在查询了相关材料之后我进行了一个简单的总结，以备后用
Zookeeper使用
ZooKeeper是一个集中的服务，用于维护配置信息、命名、提供分布式同步和提供组服务。所有这些类型的服务都以某种形式被分布式应用程序使用。每次它们被实现时，都会有大量的工作来修复不可避免的错误和竞争条件。由于实现这些服务的困难，应用程序最初通常会略过这些服务，这使得它们在出现更改时变得脆弱，并且难
【Hive】安装配置及导入Hdfs数据
一文带你了解Hive的安装配置，供大家参考！
期末复习-大数据技术原理与应用
NoSQL，泛指非关系型的数据库。NoSQL数据库的产生就是为了解决大规模数据集合多重数据种类带来的挑战，特别是大数据应用难题。特点，灵活可扩展，灵活的数据模型，与云计算紧密相连兴起的原因，海量数据的需求，数据高并发的需求，无法满足可扩展和高可用性的需求。
Centos Linux 安装单机 Hadoop（HDFS）
Centos Linux 安装单机 Hadoop（HDFS）、Centos、Linux、Hadoop、HDFS、Yarn、大数据、Apache、MapReduce
hive使用时的用户权限问题
Execution Error, return code 1 from;ljr is not allowed to add roles;Permission denied: Principal [name=ljr, type=USER] does not have following privile
HDFS写数据流程
（1）客户端向NameNode发出写文件请求（2）NameNode检查是否已存在文件、检查权限，Namenode应答可以上传。
实验三-MapReduce编程
大数据技术原理与应用-实验三-MapReduce编程这里包括了实验步骤以及实验过程中遇到的问题及解决方法~实验要求：基于MapReduce执行“词频统计”任务。将提供的A，B，C文件上传到HDFS上，之后编写MapReduce代码并将其部署到hadoop，实现文件A，B，C中的词频统计。对实验过程进
Windows11安装hadoop-3.3.0
解压到C:\hadoop-3.3.0目录，形成C:\hadoop-3.3.0\bin这种目录层次。将其中bin目录替换到C:\hadoop-3.3.0\下的bin目录。\hadoop-3.3.0\etc\hadoop目录下有4个配置文件。2. 下载winutils替换hadoop-3.3.0\bin
如何使用 SeaTunnel 同步 MySQL 数据到 Hive
连接器文档可以参考这里👉https://seatunnel.apache.org/docs/2.3.0-beta/connector-v2/source/Jdbc、https://seatunnel.apache.org/docs/2.3.0-beta/connector-v2/sink/Hive
Hadoop MapReduce--实现获取最大值和最小值
mapreduce 获取最值
【Hive】各种join连接用法
hive join连接的各种用法
Ambari+Bigtop大数据平台安装部署指南(Centos7)一
安装部署分为以下五个大步骤1.资源准备2.操作系统配置3.数据库配置4.ambari配置5.bigtop组件安装。
hbase分布式安装
Zookeeper和Hadoop集群正常启动。
实验7 Spark初级编程实践
每个输入文件表示班级学生某个学科的成绩，每行内容由两个字段组成，第一个是学生名字，第二个是学生的成绩；下面是输入文件和输出文件的一个样例，供参考。对于两个输入文件 A 和 B，编写 Spark 独立应用程序（推荐使用 Scala），对两个文件进行。1、 输入/usr/local/sbt/sbt pa
