安装hive中初始化元数据库失败，显示Failed to get schema version
起初没有想通，认真看了一下发现password的密码可能有两种情况，一种是我配置mysql文件的密码也有可能是我虚拟机主机的密码，在想一下问题的解释，告诉我的是root用户密码拒绝我的服务访问，所以我试着修改成我的root机子的密码，于是就可以了。在网上找了几种方法都没解决成功，然后我又重新看了一下
hivesql开窗函数row number() over (partition by )详解
具体来说，ROW_NUMBER() 是一种分析函数，它可以根据 ORDER BY 子句中指定的列对行进行排序，并为每个分区内的行分配唯一的连续编号。ROW_NUMBER() OVER (PARTITION BY ) 是一种窗口函数，用于在每个分区内对行进行编号。ROW_NUMBER() OVER (
Spark读取Excel文件
1、将excel转成csv文件，spark读取csv，生成数据帧；2、直接读取excel文件，生成数据帧；3、编写spark程序，直接读取excel文件，生成数据帧
Kafka基本原理、生产问题总结及性能优化实践 | 京东云技术团队
Kafka是最初由Linkedin公司开发，是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、Storm/Spark流
在项目中同时使用SpringCloud和Dubbo，注册中心选用Eureka？
项目中同时使用SpringCloud和Dubbo，注册中心的选取，基本使用到搭配使用详解
Hive从入门到大牛【Hive 学习笔记】
Hive从入门到大牛【Hive 学习笔记】
【Flume】Flume实践之采集文件内容上传至HDFS
要完成这个任务就需要使用在采集数据时使用Spooling Directory Source组件；传输数据时为了保证数据没有丢失风险，使用File Channel组件；在运行Flume之前应该先检查建立采集数据的文件夹和文件，且系统此时直接启动会报错提示找不到SequenceFile，虽然我们已经把f
复制虚拟机到新电脑后，无法联网的处理办法之一（亲测有效：Centos7 LINUX）
将备份的虚拟机拷贝的新的电脑上发现 不能ping通baidu ，修改了MAC地址和UUID后 也不好用，ens33里 网关换了又换 DNS1=8.8.8.8 DNS1=114.114.114.114等，也不能用，别急
大数据和智能数据应用架构系列教程之：大数据与交通出行
作者：禅与计算机程序设计艺术 1.背景介绍1.1什么是大数据？互联网时代，越来越多的数据被产生、存储、处理、分析和展示。这些数据产生的规模和速度都远远超过了过去几年的单机数据库能够承受的范围。这种庞大的、结构复杂的数据集合称为“大数据”（Big D
云计算与大数据——部署Kubernetes集群+完成nginx部署(超级详细！)
Kubernetes 集群是由多个物理或虚拟计算机组成的集合，用于运行和管理容器化应用程序。集群中的计算机被称为节点，其中包括一个主节点 (Master Node) 和多个从节点 (Worker Nodes)。在 Kubernetes 集群中，主节点负责管理和控制整个集群的操作。它运行了一系列核心组
Zookeeper学习笔记（1）—— 基础知识
本文介绍了zookeeper框架的基础知识，包括工作机制、集群搭建流程、leader选举机制以及命令行操作等内容
HBase高手之路5—HBase的JavaAPI编程
关闭所有的项目，在Idea的启动页。
基于Python+大数据+网络爬虫的房价数据分析系统的设计与实现 房产销售数据分析与可视化系统
当今社会，随着信息技术的不断发展和普及，大数据分析和数据挖掘正成为各个领域的热门话题。在房地产领域，房价数据一直以来都是备受关注的焦点，对购房者、开发商等各方都具有重要意义。因此，本项目旨在设计和实现一个基于大数据、Python编程和网络爬虫技术的房价数据分析系统，以满足对房价数据进行深入分析和洞察
一篇文章带你学会Hadoop-3.3.4集群部署
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。在进行自学的时候，我们都需要自己搭建一个稳定的hadoop集群，但是hadoop的集群部署还是比较麻烦的，今天我就带你通过我的一篇文章，学会
一百七十二、Flume——Flume采集Kafka数据写入HDFS中（亲测有效、附截图）
Flume采集Kafka数据写入HDFS中
用好kafka，你不得不知的那些工具
工欲善其事，必先利其器。本文主要分享一下消息中间件kafka安装部署的过程，以及我平时在工作中针对kafka用的一些客户端工具和监控工具。本文分享了平时我在工作使用kafka以及zookeeper常用的一些工具，同时分享了kafka集群的部署，值得一提的是kafka部署配置zookeeper地址的时
微服务注册到Eureka之后调用不了
前段时间，有同事反馈开发联调环境有个订单服务访问不了，在Eureka页面上点击服务也是链接拒绝，很奇怪，连接访问的ip是一个陌生IP，并不是订单服务部署服务器的ip，后来查看了下服务网卡信息，发现服务器上挂载了一个新网卡。而服务注册到Eureka服务端就是172.30.32.16的地址。当时这个ip
为Kafka动态设置用户名密码访问权限
推荐下载kafka的kafka_2.13-3.5.0版本，本配置方法基于kafka_2.13-3.5.0版本，其他版本可能略有调整。kafka安装目录为/opt/kafka。在bin目录下的kafka-server-start.sh文件，将kafka_server_jaas.conf文件目录加入到配
flink集群(docker版)配置及使用
的启用、存储方式、存储位置，在应用代码中配置，其中存储方式、存储位置，也可以在flink-conf.yaml文件中通过state.backend、state.checkpoints.dir参数配置全局参数，但应用代码中配置优先级更高。(3) Flink Checkpoint是Flink自身的系统行为
kafka详解一
kafka是一个分布式的、基于发布订阅模式的消息队列，主要应用于大数据实时处理领域。PROCESSSTOREkafka的分区策略决定了producer生产者产生的一条消息最后会写入到topic的哪一个分区中/***/1、指定具体的分区号//1、给定具体的分区号，数据就会写入到指定的分区中2、不给定具
