linux 远程拷贝命令
一、scp命令 --远程拷贝文件Linux scp命令用于linux之间进行复制文件scp 是secure copy 的缩写，scp 是基于ssh登录来进行安全拷贝补充知识：ssh进行登陆ssh 用户名@IP地址scp优势：当服务器的磁盘变为read only system时，可以通过scp将文件移
Hive与HBase之间的区别和联系
首先要知道Hive和HBase两者的区别，我们必须要知道两者的作用和在大数据中扮演的角色概念Hive1.Hive是hadoop数据仓库管理工具，严格来说，不是数据库，本身是不存储数据和处理数据的，其依赖于HDFS存储数据，依赖于MapReducer进行数据处理。2.Hive的优点是学习成本低，可以通
hadoop格式化时报错
Re-format filesystem in Storage Directory root= /data/hadoop/hdfs/name; location= null ? (Y or N)
docker搭建hadoop和hive集群
Dockfile文件的内容解释：基于centos镜像，生成带有spenssh-server、openssh-clients的镜像，用户为root，密码为a123456，镜像维护者（作者）为hadoop。因为集群的服务器之间需要通信，而且每次虚拟机给集群分配的ip地址都不一样，所以需要创建网桥，给每台
hadoop3.3.4集群安装部署
Hadoop集群安装部署
Hadoop集群环境配置搭建
Hadoop集群配置搭建
Hive字符串函数-空格处理
Hive字符串函数-空格处理
从0到1搭建大数据平台之监控
大数据平台之监控系统。
windows安装spark和hadoop
windows安装spark和hadoop
配置Sqoop1.4.7支持Hadoop3
解决Hadoop3无法使用Sqoop的问题
Hive调优策略之SQL优化
介绍了hive如何从sql层面进行调优
Docker安装Hadoop
docker exec -it hadoop bash进入容器。查找hadoop-env.sh的安装路径。配置备份数量，小于等于slave数量。三个容器都要修改如下三个IP映射。
hive的开窗函数篇
hive的开窗函数over（）
浅谈Hive SQL的优化
目前团队的数据处理都在Hadoop集群上，一是因为需要处理的数据量都是亿级的，这种规模的数据适合用Hadoop集群并行处理；二是免除了分库分表给查询处理上带来的麻烦。Hive是基于Hadoop的一个数据仓库工具，它将存储在HDFS上的结构化的文件映射成一张关系型数据库表，提供简单的SQL查询功能。本
虚拟机 安装jdk及hadoop单机版
在虚拟机上进行jdk及hadoop单机版安装，对如何配置虚拟机上的环境变量做了详细的描述，以及hadoop安装出现错误如何查找
数仓工具—Hive实战之GenericUDF使用详解(24)
GenericUDF 使用起来相比UDF 更复杂，但是我们也介绍了它支持复杂数据结构，性能更高，需要注意的是GenericUDF是抽象类不是接口，关于GenericUDF的使用的复杂案例可以参考我们的UDAF批量调用外部请求。
大数据技术之Hadoop集群配置
作者简介：大家好我是小唐同学(๑>
大数据面试核心101问【大厂超级喜欢这些题】
1. HDFS的架构 72. HDFS的读写流程 73. 小文件过多有什么危害，你知道的解决办法有哪些 84. Secondary NameNode 了解吗，它的工作机制是怎样的 85. 简述MapReduce整个流程 96. join原理 97. yarn 的任务提交流程是怎样的 108. 简述H
shell是什么？shell与linux的区别是什么？
shell是什么？与linux区别
hbase启动后没有hregionserver
三台服务器操作相同，都是在zookeeper安装路径下的bin目录下面运行启动的代码。进入hbase安装路径下的bin目录下面 ，执行群起hbase代码。这里发现只有hmaster和部分的hregionserver。进入到zookeeper安装路径下的bin目录下面运行代码。我用的是群起脚本（只需要
