Hive的安装与配置——第1关:Hive的安装与配置
外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ysxGddek-1666195111052)(D:\文件\大三上\大数据库\educoder_Hive的安装.png)]版本就说明安装成功,但是可以看到其中有一些警告信息,是由于包的冲突引起的。补充完代码后,点击测评,平台
sparksql 读取hive表子目录问题排查
sparksql读取hive表子目录问题
Spark 任务提交流程说明
本篇主要阐述 Spark 任务提交的流程,其主要目的在于通过了解 Spark 任务提交可以清楚大概的流程,并知道每一步是做什么;当遇到问题可以快速的知道是什么环节或者哪一步骤出现了问题,及时定位到问题并解决。目前Spark官方支持五中集群管理模式,分别是 Standalone、Yarn、Mesoes
Spark的基本概念与架构
Spark的基本概念与架构
HDFS高可用配置及其高可用集群搭建
HDFS的HA(高可用)的背景、造成故障的原因以及解决方案,同时介绍了HA的解决方案-QJM 并详细记录了HA集群搭建的过程
分布式文件系统
要理解分布式文件系统首先了解什么是文件系统。查阅百度百科:文件系统是负责管理和存储文件的系统软件,操作系统通过文件系统提供的接口去存取文件,用户通过操作系统访问磁盘上的文件。下图指示了文件系统所处的位置:常见的文件系统:FAT16/FAT32、NTFS、HFS、UFS、APFS、XFS、Ext4等。
在Linux系统中安装Hadoop(简易版)
Hadoop安装(简易版),适合刚入门大数据的朋友,简单好上手,轻松安装Hadoop。
VMware 搭建 hadoop 完全分布式集群
VMware 虚拟机搭建 hadoop 完全分布式集群,集成 Spark、HBASE、Hive 等
hive真实表空间大小统计
如果是采用hdfs上传加载的表、或者是flume直接写hdfs的表空间通常看hive的属性是不准确的。
HBase基于HDFS上是如何完成增删改查功能的
HDFS只支持文件append操作, 而依赖HDFS的HBase如何完成增删改查功能?
linux 部署Hadoop完全分布式集群教程
linux 部署Hadoop完全分布式集群教程
Linux系统(Centos7)实现hadoop安装
Linux系统(Centos7)实现hadoop安装
【hadoop】在Mac m1下搭建安装hadoop环境(亲测有效版)
在Mac m1环境下安装hadoop教程 亲测有效 超简单版
TEZ介绍及使用
TEZ介绍及使用
Hadoop学习笔记01:学习Linux常用操作命令
1>.ls (横向查看目录) ll(竖排查看目录)2>.mkdir (创建文件夹)3>.cd 文件夹名 (进入该文件夹) cd …(返回上一级目录)4>.rm 文件/夹名 (删除,可以接-f忽略不存在的文件,-i互动模式,-r递归删除会有危险。这是删除文件)(-rf才是删除文件夹)5>.mv 文件/
Hadoop详细集群搭建
Hadoop详细安装环境:在虚拟机上,或者租一个服务器(用学生证可以认证白嫖喔,阿里云服务器等)
启动hive报错no hbase in
bin/hive 报 which: no hbase in
Hadoop集群完全分布式搭建
hadoop集群分布式的搭建
关于Hbase启动没有Hmaster和Regionserver的问题
没有启动成功需要考虑时间没同步,配置文件是否有误
HBase RowKey设计和实现
HBase由于存储特性和读写性能,在OLAP即时分析中发挥重要作用,Rowkey的设计好坏关乎到HBase的使用情况。我们知道HBase中定位一条数据需要四个维度的限制:RowKey,Column Family,Column Qualifier,Timestamp。RowKey是其中最容易出错的,不