Kafka - 消费进度监控(Consumer Lag)

Kafka - 消费进度监控(Consumer Lag)

大数据StarRocks(六) :Catalog

StarRocks 自 2.3 版本起支持 Catalog(数据目录)功能,实现在一套系统内同时维护内、外部数据,方便您轻松访问并查询存储在各类外部源的数据。

数据仓库-相关概念

数据仓库是一个用于集成、存储和管理大量数据的系统。它用于支持企业决策制定过程中的数据分析和报告需求。数据仓库从多个来源收集和整合数据,并将其组织成易于查询和分析的结构。数据仓库的主要目标是提供高性能的数据访问和分析能力,以便用户可以从不同的角度和层次上理解和解释数据。它通常包含历史数据,用于支持趋势

大数据环境搭建(一)-Hive

Hive安装部署

Prometheus实战篇:Prometheus监控rabbitmq

这里注意rabbitmq需要暴露2个端口。

奇富科技:大数据任务从诊断到自愈的实践之路

一、为什么要做诊断引擎毓数平台是奇富科技公司自主研发的一站式大数据管理、开发、分析平台,覆盖大数据资产管理、数据开发及任务调度、自助分析及可视化、统一指标管理等多个数据生命周期流程,让用户使用数据的同时,挖掘数据最大的价值。而毓数平台的大数据任务调度底层是基于Apache DolphinSchedu

Spark与Hadoop对比

通常情况下,Apache Spark运行速度是要比Apache Hadoop MapReduce的运行速度要快,因为Spark是在继承了MapRudece分布式计算的基础上做了内存计算的优化,从而避免了MapReduce每个阶段都要数据写入磁盘的操作,这样就减少了很多低效的I/O操作。

详解SpringCloud微服务技术栈:一文速通RabbitMQ,入门到实践

详解SpringCloud微服务技术栈:一文速通RabbitMQ,入门到实践

中间件与rabbitmq

通过交换机(Exchanges)和队列(Queues),RabbitMQ可以灵活地处理消息路由,支持不同类型的消息模式,如直接、主题、扇出和头部交换。RabbitMQ广泛应用于各种行业和场景,如金融服务、电信、云计算和物联网等,为企业和开发人员提供了一个强大、灵活和可靠的消息传递解决方案。:Rabb

大数据趋势分析:如何利用AI提高预测准确率

1.背景介绍大数据是指由于互联网、移动互联网、物联网等信息技术革命的产生,数据量大、增长迅速、多样化、实时性强的数据集。大数据具有五个主要特征:量、速度、多样性、实时性和不确定性。大数据的应用范围广泛,包括金融、医疗、物流、电商、教育等领域。预测分析是大数据的一个重要应用,主要用于预测未来的发展趋势

医院大数据服务平台—基于金桐0代码数据中台(桐果云)的数据应用

医院大数据服务平台是基于深圳金桐科技旗下的0代码数据中台产品(桐果云)结合行业需求建设的行业应用平台。改平台改变传统数据分析定制开发的模式,基于“授之以渔”的理念,采用0代码数据建模技术,将数据分析下沉交到一线,实现贴近业务、贴近一线、可持续的大数据应用。

智能科学毕设分享(含算法) 基于大数据人才岗位数据分析

这里是毕设分享系列,学长分享优质毕业设计项目,今天要分享的是🚩基于大数据人才岗位数据分析毕业设计 基于大数据人才岗位数据分析。

揭秘 Kafka 高性能之谜:一文读懂背后的设计精粹与技术实现

kafka的性能很高,这使其应用广泛,但是你这道高性能的背后,kafka做了哪些工作吗?

基于SpringBoot实现的AI智能大数据医疗诊断平台

基于SpringBoot实现的AI智能大数据医疗诊断平台,主要包含六个大模块:系统管理、居民医保信息、药物信息管理、居民健康信息、居民就诊信息和我的预约信息。项目启动后可以通过管理员身份、医生或者病人身份进入系统,进入系统后会呈现对应的后台管理主界面,通过后左侧的导航菜单,实现不同模块功能的使用、数

HBase的数据批量操作与事务处理

1.背景介绍HBase是一个分布式、可扩展、高性能的列式存储系统,基于Google的Bigtable设计。它是Hadoop生态系统的一部分,可以与HDFS、MapReduce、ZooKeeper等组件集成。HBase具有高可用性、高可扩展性和高性能等特点,适用于大规模数据存储和实时数据处理。在大数据

Kafka用法总结

Kafka是一个分布式的基于发布/订阅模式的消息队列(Message Queue),主要应用于大数据实时处理领域。

【hive】- 使用insert into/insert overwrite插入数据到静态分区、动态分区、动静态分区

使用insert into/insert overwrite插入数据到静态分区、动态分区、动静态分区

Flink 的 Checkpoint配置详解

Flink 的 Checkpoint 配置详解

HBase表结构

HBase是非关系型数据库,是高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库。

Flink问题解决及性能调优-【Flink rocksDB读写state大对象导致背压问题调优】

RocksDB是Flink中用于持久化状态的默认后端,它提供了高性能和可靠的状态存储。然而,当处理大型状态并频繁读写时,可能会导致背压问题,因为RocksDB需要从磁盘读取和写入数据,而这可能成为瓶颈。

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈