SpringBoot集成Kafka
SpringBoot集成Kafka工程搭建SpringBoot集成Kafka配置SpringBoot集成Kafka生产消息SpringBoot集成Kafka消费消息
第3.4章：StarRocks数据导入--Flink Connector与CDC秒级数据同步
Flink作为当前流行的流式计算框架，在对接StarRocks时，若直接使用JDBC的方式“流式”写入数据，对StarRocks是不友好的，StarRocks作为一款MVCC的数据库，其导入的核心思想还是“攒微批+降频率”。为此，StarRocks单独开发了flink-connector-starr
安装配置Tomcat，idea配置Tomcat（纯步骤）
3、在Tomcat Server -> Unnamed -> Server -> Application server项目下，点击 Configuration ，找到本地 Tomcat 服务器，再点击 OK按钮。（注意加的时候在原变量值后加英文状态下的“;2、点击左侧“+”号，找到Tomcat Se
Hadoop-yarn-未授权访问漏洞
Hadoop是一个由Apache基金会所开发的分布式系统基础架构，由于服务器直接在开放了 Hadoop 机器 HDFS 的 50070 web 端口及部分默认服务端口，黑客可以通过命令行操作多个目录下的数据，如进行删除，下载，目录浏览甚至命令执行等操作，产生极大的危害。
clickhouse 集群搭建
clickhouse 集群
-bash: xsunc: 未找到命令 如何解决？
在搭建Hadoop集群环境的时候，用到了同步即xsync 命令，写完脚本后又发现，执行过程中有问题，特此总结。问题情景1——未找到命令此类问题多半是因为 xsync 可执行文件 没有被配置环境路径解决方法：输入代码：$PATH查看自己终端上的环境，主要有两种解决办法1.将xsync文件复制到查到的全
spring boot集成RabbitMQ-SpringBoot（24）
RabbitMQ 是开源的高级消息队列协议(Advanced Message Queueing Protocol, AMQP) 的实现，用Erlang 语言编写，支持多种客户端。RabbitMQ是目前应用相当广泛的消息中间件(其他同类的消息处理中间件有ActiveMQ、Kafka等)。在企业级应用、
docker上启动kafka
在docker上启动kafka,是因为最近我们开发的程序需要部署到k8s，在k8s上连接kafka，连接失败，因此我先搭建个环境，以供后续还原问题，解决问题。文章目录一、docker上启动kafka1.下载zookeeper镜像2.下载kafka镜像3.启动zookeeper4.启动kafka5.进
Zookeeper安装部署与基本使用
zk单机与集群部署以及相关基础命令使用
Elasticsearch8.X入门实战（四）Kibana8.1安装
Kibana是一个开源的分析与可视化平台，用于和Elasticsearch一起使用。我们可以用Kibana搜索、查看、交互存放在Elasticsearch索引里的数据，并使用各种不同的图表、表格、地图等进行可视化查看。
大数据之clickhouse安装部署
一、clickhouse简介优点：缺点：
大数据知识面试题-Hive （2022版）
Hive中所有的数据都存储在HDFS中，没有专门的数据存储格式在创建表时指定数据中的分隔符，Hive 就可以映射成功，解析数据。Hive中包含以下数据模型：**db：**在hdfs中表现为hive.metastore.warehouse.dir目录下一个文件夹**table：**在hdfs中表现所属
Elasticsearch：如何正确处理 Elasticsearch 摄取管道故障
我将使用一个实际的例子来展示如何实现一个死信索引（dead letter index - DLI）来捕获在使用 Elasticsearch Ingest pipeline 时运行摄取管道时的一些错误。摄取管道的能力是 Elastic Stack 提供的最强大的工具之一，用于在 Elasticsear
数据分析-1.必备的三大能力
数据分析价值观、数据分析方法论、数据分析工具
LEAP模型能源与碳排放模型
LEAP拥有灵活的结构，使用者可以根据研究对象特点、数据的可得性、分析的目的和类型等来构造模型结构和数据结构，可以用来分析不同情景下的能源消耗和温室气体排放，这些情景是基于能源如何消耗、转换和生产的复杂计算，综合考虑关于人口、经济发展、技术、价格等一系列假设。3.5 天然气及可再生能源情景（NGCC
Python-sklearn之PCA主成分分析
文章目录写在前面一、PCA主成分分析1、主成分分析步骤2、主成分分析的主要作二、Python使用PCA主成分分析写在前面作为大数据开发人员，我们经常会收到一些数据分析工程师给我们的指标，我们基于这些指标进行数据提取。其中数据分析工程师最主要的一个特征提取方式就是PCA主成分分析，下面我将介绍Pyth
hive 数组和string互转
hive 数组和string转换
haoop启动正常，但上不去网页hadoop102:9870
如果操作系统是window10，先拷贝出来，修改保存以后，再覆盖即可（a）进入C:\Windows\System32\drivers\etc路径（b）拷贝hosts文件到桌面（c）打开桌面hosts文件并添加如下内容
Zookeeper02：Zookeeper安装部署【单机】
一、Zookeeper的安装部署针对Zookeeper前期不需要掌握太多，只需要掌握Zookeeper的安装部署以及它的基本操作即可。Zookeeper也支持单机和集群安装，建议大家在学习阶段使用单机即可，单机和集群在操作上没有任何区别。在这里我们会针对单机和集群这两种方式分别演示一下。二、Zook
doris的tablet副本修复相关情况总结
在使用doris的时候，由于一些极端情况的出现或者doris本身bug的原因，会出现一些tablet损害的情况，导致数据的插入和查询受到影响，下面总结一下doris副本出现损坏时进行修复的一些情况
