1、kafka(2.12-3.0.0)介绍、部署及验证、基准测试

Kafka是由Apache软件基金会开发的一个开源流平台,由Scala和Java编写。Publish and subscribe:发布与订阅Store:存储Process:处理Kafka生态圈官网地址:https://cwiki.apache.org/confluence/display/KAFKA

【大数据】通过 docker-compose 快速部署 MinIO 保姆级教程

MinIO 是一个开源的对象存储服务器,它兼容Amazon S3(Simple Storage Service)API。它被设计用于构建分布式存储架构,提供高可用性、高性能和可扩展的对象存储解决方案。

将list对象存储进redis中去

Redis存储支持的类型没有object,虽然有支持list,但是它只支持list。所以我们可以将list对象转换成json字符串,然后再将字符串传入到redis中去。

Flink 状态后端

状态后端 (state backend) : 负责管理本地状态的存储方式, 位置。

HIVE创建分区表

partitioned by ( c2 string ) # 创建分区 c1跟c2都是字段,但是创建的时候不能写在t2里面,只能写在分区里面(同时select查询的时候,c2的字段也要写在最后面)注意:当你退出过hive后,再次进入hive,不要忘记使用了哪个database,我这里使用的是te

Hadoop: High Available

即HDFS 支持一主一备的架构最多支持 5 个,官方推荐使用 3 个基于Hadoop3.x. 总的来说就是要借助Zookeeper来实现高可用,然后就是编辑Hadoop的配置文件已实现高可用[email protected]

RabbitMQ消息堆积问题及惰性队列

RabbitMQ消息堆积问题及惰性队列

ElasticSearch 部署及安装ik分词器

公司es集群现以三个角色部署分别为 Gateway、Master、Data 简单的理解可以理解为在每台机器上部署了三个es,以端口和配置文件来区分这三个es不同的功能。我们知道本来安装分词器是件特别简单的事网上的教程也是一大片一大片的,在我们的环境和架构下在es 5.5版本之后就不需要修改es的配置

RabbitMQ 管理页面该如何使用

management: 用户可以通过 AMQP 做的任何事 列出自己可以通过 AMQP 登入的 virtual hosts 查看自己的 virtual hosts 中的 queues, exchanges 和 bindings 查看和关闭自己的 channels 和 connections 查看有关

吴恩达《ChatGPT Prompt Engineering for Developers》【自用】

作者 吴恩达教授欢迎来到本课程,我们将为开发人员介绍 ChatGPT 提示工程。本课程由 Isa Fulford 教授和我一起授课。Isa Fulford 是 OpenAI 的技术团队成员,曾开发过受欢迎的 ChatGPT 检索插件,并且在教授人们如何在产品中使用 LLM 或 LLM 技术方面做出了

elasticsearch目录及配置参数说明

elasticsearch目录及配置参数说明

深入了解Spring Cloud的服务注册与发现组件Eureka

本文将深入介绍Spring Cloud中的Eureka组件,包括其背景、特性、工作原理以及与其他Spring Cloud组件的配合使用等方面,帮助读者更好地理解和使用Eureka。本文深入介绍了Spring Cloud中的服务注册与发现组件Eureka,包括其背景、特性、工作原理以及与其他Sprin

大数据平台环境搭建

大数据平台环境搭建(最详细最全面最无脑)

idea没有maven工具栏解决方法

1、如果是新创建的maven工程,右键点击项目的 pom.xml 文件,如果有 “Add as Maven Project” 选项,点击该选项,应该就会有maven;3、点击菜单栏View–>Tool Windows–>Maven projects,即可出现。2、idea界面最左下角的那个小框,ma

docker和k8s、nginx、rpc、kafka的学习介绍和实战以及学习理念

(Service就相当于一组pod,也就是实现某种功能的一个进程集合,比如mysql的一组进程,也就是说,在进行service作为虚拟ip的时候,真正到的pod会变飘逸的,但是service不会变的,有点类似于NAT,可以实现负载均衡了。(主要有API和客户端交互接口,etcd键值数据库存储状态,调

Flink读取数据的5种方式(文件,Socket,Kafka,MySQL,自定义数据源)

当需要对Flink进行一些性能测试时,可以使用自定义数据源来简化测试过程。Flink支持自定义数据源,可以使用循环生成所需要格式的测试数据,使用方式非常灵活。运行程序后,会产生源源不断的数据。

SpringBoot集成RabbitMQ(生产者)

默认读者已经对SpringBoot和RabbitMQ比较熟悉。

分布式任务调度框架Power-Job

PowerJob可以被认为是第三代任务调度框架,它是新一代分布式任务调度与计算框架,支持CRON、API、固定频率、固定延迟等调度策略,提供工作流来编排任务解决依赖关系,能让您轻松完成作业的调度与繁杂任务的分布式计算,在任务调度的基础上,还额外提供了分布式计算和工作流功能

FCRP-D---帆软官网模拟题,报表模块

FR练习题目

国产操作系统再获重大突破,美国芯片龙头Intel也主动加入了

近日媒体报道指国产操作系统统信UOS已与美国芯片企业Intel成立联合实验室,共同推动通信UOS与Intel处理器的软硬件生态,这代表着国产操作系统的重大突破,适配最广泛普及的X86处理器,将有助于国产操作系统走向海外市场。国产操作系统的发展让业界关注,在于操作系统事关信息安全,因此近几年来国产操作

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈