数据仓库Hive（林子雨课程慕课）
Hive特点传统的数据仓库既是数据存储产品也是数据分析产品传统的数据仓库能同时支持数据的存储和处理分析Hive本身并不支持数据存储和处理其实只是提供了一种编程语言其架构于Hadoop之上，Hadoop有支持大规模数据存储的组件HDFS，以及支持大规模数据处理的组件MapReduceHive借助于这两
Hive【Hive（三）查询语句】
Hive 查询语句、基本查询、分组、排序、join
Hadoop报错Permission denied: user=dr.who, access....
该问题其实是一个权限问题，可能会导致运行 “ hadoop jar ”命令时报错；MapReduce工件，中间数据将保存在该目录下。MapReduce作业执行完成后，这些文件将自动清除。报错原因是因为运行 ” hadoop jar “ 文件时的默认hdfs文件夹是tmp，但是由于权限不够导致运行失败
Hadoop伪分布式环境搭建
Hadoop 伪分布式集群是一种在单个节点上模拟分布式环境的配置，用于学习、开发和测试 Hadoop 的功能和特性。它提供了一个简化的方式来体验和熟悉 Hadoop 的各个组件，而无需配置和管理一个真正的多节点集群。在 Hadoop 伪分布式集群中，各个 Hadoop 组件（如 NameNode、D
hdfs中的租约机制及Flink写hdfs文件未关闭及ORC
主租约是由文件的创建者持有的，它控制着文件的写入和编辑权限。主租约的持有者可以选择将租约延长，以延续对文件的写入和编辑权限。在HDFS中，租约机制的主要目的是确保并发写入时的数据一致性和文件的完整性。通过租约机制，HDFS可以保证在同一时间只有一个用户可以对文件进行写入或编辑操作，从而避免了数据冲突
搭建伪分布式Hadoop
搭建伪分布式Hadoop
VMware CentOS 虚拟机 Hadoop集群网络 配置静态IP
VMware CentOS构造Hadoop集群时，往往需要VMnet8这个虚拟交换机来连接集群内各服务器，而集群服务器之间互相频繁访问，需要指定IP地址。这就需要把各服务器分配静态的IP地址。本文详细地给出了网段IP地址的规划和设置步骤。最主要地是要设置网关地址。
spark获取hadoop服务token
spark提交作业不含hbase的相关逻辑为什么会去获取hbase服务的token
Hadoop——HDFS的Java API操作（文件上传、下载、删除等）
HDFS的文件相关操作
编程实现Hadoop按日期统计访问次数
因为访问日期是数据文件中的第2列，所以先定义一个数组后，再提取第2个元素，与初始次数1一起构成要输出的键值对，即。数据总共有两列，第一列为用户名，第二列为登录的日期，想要统计每个自然日，也就是每一天的访问次数，可以转换为对日期值的词频统计，只要统计出每个日期出现的次数，就可以知道对应日期的日访问次数
hive 如何处理json字符串
hive处理json字符串以及json数组
flume的安装与配置
flume的详细安装与配置
数据采集与Hadoop总结
在网页当中按f12或者右键选择检查打开开发者模式其中对应着网页组成的元素、控制台、源代码、网络等。在网络当中选择了一个文件以后我们可以看到它的获取方式、请求头、URL地址等信息。
【大数据】Hadoop运行环境搭建
自动进入图形界面安装—>选择中文（安装过程中使用的语言，不代表操作系统的语言），继续—>修改时区、日期和时间—>软件选择可以选择最小安装或者GNOME桌面安装，本次选择桌面版。中的主机名配置信息，例如将主机名配置为hadoop100（后面的几台集群中主机为hadoop101、hadoop102、ha
【hive 运维】hive注释/数据支持中文
【hive 运维】hive注释/数据支持中文
【大数据实训】—Hadoop开发环境搭建（一）
因为JDK的压缩包有大概200M，所以我们已经在平台中为你下载好了JDK，不用你再去Oracle的官网去下载了，如果你要在自己的Linux系统中安装，那么还是需要下载的。配置开发环境是我们学习一门IT技术的第一步，Hadoop是基于Java开发的，所以我们学习Hadoop之前需要在Linux系统中配
Hadoop分布式集群搭建教程
大数据课程需要搭建Hadoop分布式集群，在这里记录一下搭建过程。
一百一十七、Hadoop——GZIP压缩并解压HDFS中的文件
GZIP压缩并解压HDFS中的文件
Hive 建表客户端报错 missing EOF at “/“
后来把sql中的注释去掉以后，或者把注释开头替换成 – 此异常便可以解决。在创建表时，我使用的是idea客户端，报了如下错误。
HDFS读写流程详细过程
HDFS详细的读写流程，edit和fsimage文件的更新，WAL技术
