Spark机器学习实战-Spark的安装及使用
本文首先介绍了Spark的基础知识以及RDD和DataFrame这些核心概念，然后演示了如何下载Spark二进制版本并搭建一个本地单机模式下的开发环境，最后通过Python语言来编写第一个Spark程序。
(详细)Hadoop配置实战-伪分布式
Hadoop集群配置，伪分布式，hdfs命令，hadoop集群命令，Hadoop相关下载地址
hive中的表操作
1，hive概述Hive是基于Hadoop的数据仓库，用于处理结构化的数据集，数据结构存在于MySQL，数据存在 HDFS。Hive可以将一个类似于sql的查询语句（HQL）翻译成MR程序，将job提交给HDFS进行查询 时，hive把HDFS上的一个目录映射成一张Hive表，在查询的时候就是把jo
通过XShell远程连接Linux
上节我们完后虚拟机的安装后，由于页面不利于操作，可通过XShell工具连接后开始之后的操作。附上XShell官方下载地址https://www.xshell.com/zh/xshell/其下载流程简单，傻瓜式安装即可，且免费开源，配合官网页面另一产品Xftp一起用效果最好附上Xftp官方下载地址ht
超详细的基于docker搭建hadoop集群
基于Docker搭建Hadoop集群
2022.04.27智警杯CIPUC校内选拔赛-伪集群安装
Hadoop伪集群安装1、 基础配置考核条件如下：(1) 按照左侧虚拟机名称修改对应主机名为hadoop000(使用hostnamectl命令)hostnamectl set-hostname hadoop000bash命令详解：hostnamectl命令用来管理给定主机中使用的三种类型的主机名ba
[Hadoop三大组件之一]MapReduce——WordCount案例
✅作者简介：大家好,我是Philosophy7？让我们一起共同进步吧！🏆📃个人主页：Philosophy7的csdn博客🔥系列专栏：Hadoop💖如果觉得博主的文章还不错的话，请点赞👍+收藏⭐️+留言📝支持一下博>主哦🤞MapReduce一、简单认识MapReduce二、官方案例
Hadoop快速入门——入门考试(伪分布式60+编码25+执行jar15)
Hadoop快速入门——入门考试(伪分布式60+编码25+执行jar15)1、创建1台Linux虚拟机，并打开对应的网络连接(VMnet8)(5分)2、通过xshell正确连接Linux虚拟机(5分)3、在【/opt/】文件夹下上传【java】以及【hadoop】压缩包(5分)4、解压【java】以
Hadoop快速入门——第四章、zookeeper(集群)
Hadoop快速入门——第四章、zookeeper集群前置条件：配置ssh免密登录&hadoop分布式1、上传【zookeeper-3.4.6.tar.gz】文件2、解压文件tar -zxvf zookeeper-3.4.6.tar.gz3、修改文件名称方便操作mv zookeeper-3.
HIVE学习系列——windows Hadoop安装（上）
文章目录Hadoop安装HIVE MySQL版本安装Hadoop安装Hadoop官网点击Download选择Binary download下的最新版本即可Source Distribution 表示源代码版，需要编译后使用Binary Distribution 表示可执行版，直接解压使用点击该条链接
hadoop伪分布式安装（超详细）
hadoop伪分布式安装
MapReduce使用
maven:<dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-client</artifactId> <versio
Hadoop完全分布式环境部署(一看就会）
Hadoop完全分布式环境部署
Hadoop集群启动和关闭脚本
文章目录Hadoop集群启动关闭脚本一、Hadoop集群启动脚本1.在cd $HADOOP_HOME路径下创建jiqunstart.sh文件。二、Hadoop集群关闭脚本1.同理在cd $HADOOP_HOME路径下创建jiqunstop.sh文件。三、运行两个脚本1.脚本运行成功后，打开50070
大数据笔记（三）：HDFS集群搭建-伪分布式模式
HDFS集群搭建-伪分布式模式
hadoop集群之hdfs文件系统常见操作命令
hdfs文件系统常见操作命令
使用最新版flink tidb cdc 同步数据到StarRocks
Flink CDC 2.2 版本新增了 OceanBase CE，PolarDB-X，SqlServer，TiDB 四种数据源接入。其中新增 OceanBase CDC，SqlServer CDC，TiDB CDC 三个连接器，而 PolarDB-X 的支持则是通过对 MySQL CDC 连接器进行
初步认识Hadoop
学习目的· 了解大数据的概念及其特征· 了解Hadoop发展· 掌握Hadoop的生态体系Hadoop作为一个能够对大量数据进行分布式处理的软件框架，用户可以利用Hadoop生态体系开发和处理海量数据。由于Hadoop可靠及高效的处理性能，逐渐称为分析大数据的领先平台。1.1 什么是大数据 从
Hadoop完全分布式配置
1.虚拟机环境准备1.1 克隆虚拟机1.2. 修改克隆虚拟机的静态IP机器名静态IPmaster192.168.121.151slaver1192.168.121.152slaver2192.168.121.153[root@master Desktop]# vi /etc/sysconfig/ne
大数据入门-什么是Kudu
Kudu是Cloudera开源的新型列式存储系统，是Apache Hadoop生态圈的成员之一，专门为了对快速变化的数据进行快速的分析，填补了以往Hadoop存储层的空缺。
