hive表的输入输出格式总结

hive输入输出格式总结

Hadoop高可用搭建(一)

Hadoop高可用搭建(一)

spark为什么比hadoop快

spark为什么快

hive安装 ———附下载链接、安装过程中所遇问题及解决办法(linux)

一、前期准备1. hive 及相关配置文件下载1. hadoop集群2. 安装mysql二、安装hive1. 解压并安装 Hive 使用下面的命令,解压 Hive 安装包:2.配置 MySQL3.配置 Hive5.启动 Hive6. 配置hive下的mysql数据库7.验证 Hive 安装是否成功三

Hive 搭建(将 MySQL 作为元数据库)

安装 Hive 之前请先确保你当前已经安装好了 Hadoop,并且运行正常。

HDFS完全分布式集群搭建与配置

(1)防火墙设置:为了防止发生一些奇奇怪怪的错误,请务必关闭所有节点的防火墙,他可能会导致浏览器无法获取集群信息和文件上传集群失败环境搭建,还有通过.start-dfs.sh命令启动集群失败的很大一个原因就是服务器防火墙未关闭的原因。(2)hosts文件配置和主机名:因为这是完全分布式的集群,所以配

Hadoop虚拟机安装超详细版

5.命名一个虚拟机名称,如:hadoop1。(注:位置不放在C盘)14.配置超级管理员和普通用户(配置root密码)4.选择我们的操作系统:CentOS 64位。6.选择磁盘大小,选择拆分成多个文件。点击CentOS 7,或等待60s。12.选择语言:Engelish。1.创建一个新的虚拟机。2.选

hadoop理论基础(一)

hadoop理论基础

Hive详解(超详细)

hive详解

Hbase命令行语句

语法:desc ‘表格名’语法:create ‘表格名’,‘列族名1’,‘列族名2’,‘列族名n’语法:disable ‘表格名’语法:enable ‘表格名’语法:scan ‘表格名’语法:id_disabled ‘表格名’语法:disable_all ‘条件’语法:enable_all ‘条件’

Hive的安装与配置——第1关:Hive的安装与配置

外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ysxGddek-1666195111052)(D:\文件\大三上\大数据库\educoder_Hive的安装.png)]版本就说明安装成功,但是可以看到其中有一些警告信息,是由于包的冲突引起的。补充完代码后,点击测评,平台

sparksql 读取hive表子目录问题排查

sparksql读取hive表子目录问题

Spark 任务提交流程说明

本篇主要阐述 Spark 任务提交的流程,其主要目的在于通过了解 Spark 任务提交可以清楚大概的流程,并知道每一步是做什么;当遇到问题可以快速的知道是什么环节或者哪一步骤出现了问题,及时定位到问题并解决。目前Spark官方支持五中集群管理模式,分别是 Standalone、Yarn、Mesoes

Spark的基本概念与架构

Spark的基本概念与架构

HDFS高可用配置及其高可用集群搭建

HDFS的HA(高可用)的背景、造成故障的原因以及解决方案,同时介绍了HA的解决方案-QJM 并详细记录了HA集群搭建的过程

分布式文件系统

要理解分布式文件系统首先了解什么是文件系统。查阅百度百科:文件系统是负责管理和存储文件的系统软件,操作系统通过文件系统提供的接口去存取文件,用户通过操作系统访问磁盘上的文件。下图指示了文件系统所处的位置:常见的文件系统:FAT16/FAT32、NTFS、HFS、UFS、APFS、XFS、Ext4等。

在Linux系统中安装Hadoop(简易版)

Hadoop安装(简易版),适合刚入门大数据的朋友,简单好上手,轻松安装Hadoop。

VMware 搭建 hadoop 完全分布式集群

VMware 虚拟机搭建 hadoop 完全分布式集群,集成 Spark、HBASE、Hive 等

hive真实表空间大小统计

如果是采用hdfs上传加载的表、或者是flume直接写hdfs的表空间通常看hive的属性是不准确的。

HBase基于HDFS上是如何完成增删改查功能的

HDFS只支持文件append操作, 而依赖HDFS的HBase如何完成增删改查功能?

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈