大数据处理技术-头歌平台-答案
写在最前HBase的安装与简单操作第一关:单机版安装第三关HBase 伪分布式环境搭建第一关:伪分布式环境搭建ZooKeeper入门-初体验第一关 ZooKeeper初体验第2关:ZooKeeper配置第3关:Client连接及状态ZooKeeper之分布式环境搭建第1关:仲裁模式与伪分布式环境搭建
头歌 分布式文件系统HDFS 答案
迢迢牵牛星,皎皎河汉女。纤纤擢素手,札札弄机杼。终日不成章,泣涕零如雨。河汉清且浅,相去复几许?盈盈一水间,脉脉不得语。HDFS的块比磁盘的块大,其目的是为了最小化寻址开销。第2关:HDFS-JAVA接口之读取文件。第3关:HDFS-JAVA接口之上传文件。第4关:HDFS-JAVA接口之删除文件。
Hive(完整版)
大数据-Hive(完整版)
Hadoop集群搭建
Hadoop集群搭建,从下载到安装到配置。
《Hadoop大数据技术》实验报告(1)Hadoop的伪分布式安装和配置
在linux平台中安装Hadoop,包括JDK安装、SSH免密码配置和伪分布式安装。
大数据集群环境搭建
#linux集群环境搭建 集群、分布式---->多台机器 虚拟机克隆 服务器基础环境准备 1、防火墙关闭 2、主机名hostname修改 3、hosts主机名 IP映射 4、ssh免密登录 5、扩展:跳板机、堡垒机 6、集群时间同步 7、scp 跨集群复制文件#Linux软件安装 rp
Hadoop HA 部署
Hadoop HA 部署、1+x大数据中级认证
zk常用的命令
zk的命令
CentOS 7 上hadoop伪分布式搭建全流程完整教程
centos7 上hadoop搭建详细步骤
【数据库-Hive-01】hive为什么不支持更新和删除,一起找找根源
Hive支持更新和删除吗?这是一道典型的大数据面试题,绝大部分人回答不支持。其实也没错,但是更准确的回答是可以支持,主要是看怎么建表的,如果想要支持Update功能要按以下方式建表:Hive对使用Update功能的表有特定的语法要求, 语法要求如下... 为什么设计成不支持内,我们一起聊聊根源...
FlinkSQL消费Kafka写入Hive表
flinkSQL消费kafka实时写入hive表
在Windows下的flume 安装,部署及和kafka组合使用
一,Windows下配置环境变量此电脑->右键属性->系统->高级系统设置->环境变量(1) 环境变量名:FLUME_HOME变量值:就是安装的flume的路径例如我自己的是:FLUME_HOME;E:\flume\apache-flume-1.9.0-bin(2)在path
Spark 内存迭代计算
Spark内存迭代计算,算子之间形成DAG,每个task根据并行度在内存中不断迭代计算
Hudi系列15:Hudi元数据同步到Hive
Hudi元数据同步到Hive
第1关:MapReduce综合应用案例 — 电信数据清洗
第1关:数据清洗MapReduce综合应用案例 — 电信数据清洗
数据库服务安全--Mysql未授权--Hadoop未授权配合RCE--Redis未授权&RCE
数据库安全漏洞--MySQL--Hadoop--Redis
Hbase伪分布部署
本实验任务主要完成基于ubuntu环境的Hbase伪分布部署的工作。通过完成本实验任务,要求学生熟练掌握Hbase伪分布部署的方法,为后续实验的开展奠定Hbase平台基础,也为从事大数据平台运维工程师、大数据技术支持工程师等岗位工作奠定夯实的技能基础。1、掌握Hbase伪分布部署Ubuntu、Had
大数据项目实战之数据仓库:用户行为采集平台——第2章 项目需求及架构设计
大数据项目实战之数据仓库:用户行为采集平台——第2章 项目需求及架构设计
大数据--python远程连接Hive
步骤:启动metastore启动hiveserver2使用beeline进行连接测试,查看地址等是否能够成功连接(确认无误可以跳过)使用python连接hive(粗暴的文件配置以及完整操作见文末)一.启动hiveserver21.配置mode为http,端口为10001(默认)<propert