springboot整合eureka、config搭建注册中心和配置中心
这篇文章详细介绍怎么通过eureka和config分别搭建一个注册中心和配置中心的服务。
SpringBoot 整合RabbitMQ
springboot整合RabbitMQ笔记
关于kafka安装使用qqf
kafka的学习和使用,会更新使用java链接kafka这些
Hadoop知识点
第二个阶段是由 ApplicationMaster 创建应用程序,为它申请资源,并监控它的整个运行过程,直到运行完成。(1)客户端通过Distributed FileSystem向NameNode请求下载文件,NameNode通过查询元数据,找到文件块所在的DataNode地址。(3)DataNod
kafka千万级数据积压原因以及解决方案
首先我们在上面分析得出,是由于上游生产者producer发送数据过快,以及下游消费者consumer拉取数据过慢,实质上就是,生产者生产数据速度>>消费者消费数据速度。我们都知道,数据积压的直接原因,一定是系统中的某个部分出现了性能问题,来不及处理上游发送的数据,才会导致数据积压。那么我们就需要分析
Iceberg从入门到精通系列之九:flink sql修改Iceberg表和删除Iceberg表
Iceberg从入门到精通系列之九:flink sql修改Iceberg表和删除Iceberg表。
Zookeeper的配置和myid文件说明
zookeeper配置和myid文件
linux上启动zookeeper
Linux操作zookeeper的启动,结束,重启
Kafka数据倾斜到某一个分区解决方案
Kafka数据倾斜到某一个分区解决方案
使用DataX实现mysql与hive数据互相导入导出
使用DataX实现mysql与hive数据互相导入导出
100G光模块的应用案例分析:电信、云计算和大数据领域
100G光模块是一种高速光模块,由于其高速率和低延迟的特性,在电信、云计算和大数据领域得到了广泛的应用。在本文中,我们将深入探讨100G光模块在这三个领域的应用案例。
RabbitMQ在CentOS下的安装
8. 配置端口,如果是阿里云,腾讯云,需要配置安全组,打开15762端口。如果是vmware虚拟机,需要配置防火窗。1.环境配置:CentOs 7.6以上版本,我的版本是7.9,不要对yum换源,否则可能会安装失败。11. 浏览器访问ip:15672, 用admin 密码123456即可登录。9.
clickhouse介绍
ClickHouse 是俄罗斯的 Yandex 于 2016 年开源的用于在线分析处理查询MPP架构的列式存储数据库(DBMS:Database Management System),能够使用 SQL 查询实时生成分析数据报告。ClickHouse的全称是Click Stream,Data Ware
kafka常用命令大全
kafka常用命令,自己记录自己用的,如果安装有kafka manager 或者kafka eagle可以不用熟悉一下命令:–提示 --zookeeper的命令可能需要在后面加入/kafka 因为一般企业都会建节点的时候建个父目录kafka常用命令相关概念Brokerkafka节点,多个brok
rabbitmq自动创建队列
在学习springAMQP时遇到了一个问题在使用下方代码时候,rabbitmq控制台不能自动创建queue只能自己手动添加队列后message才会存入队列中。解决方法加上注解,填上队列名就会在运行时自动创建队列了
Hadoop运行模式
🍊hi,各位友友们,本篇文章是大数据系列-Hadoop运行模式的文章,里面讲解了Hadoop和集群的启动命令、日志、历史记录等内容,欢迎各位学习者阅读,也欢迎对不足的地方提出批评和建议
成功解决DataX从Hive导出Oracle的数据乱码问题!
大数据与RDBMS之间的数据导入和导出都是企业日常数据处理中常见的一环,该环节一般称为e-t-l即。市面上可用的etl工具和框架很多,如来自于传统数仓和BI圈的, 来自于hadoop生态圈的,抑或使用计算引擎直接编写代码完成etl作业。在这里跟大家分享一次使用datax从hive导出数据到oracl
Linux环境如何彻底卸载感干净rabbitmq
Linux环境如何彻底卸载感干净rabbitmq
Rabbitmq下载安装图文详解(Windows版_超详细)
Rabbitmq下载安装图文详解(Windows版_超详细)
4.2、Flink任务怎样读取文件中的数据
读取文件时可以设置哪些规则呢?1. 文件的格式(txt、csv、二进制...)2. 文件的分隔符(按\n 分割)3. 是否需要监控文件变化(一次读取、持续读取)基于以上规则,Flink为我们提供了非常灵活的 读取文件的方法。