大数据理论体系

目录结构大数据是什么?大数据是如何发展起来的?大数据处理的基本流程是什么?为什么说数据不动代码动?移动计算比移动数据更划算?DAG对大数据处理有什么好处?批处理和流处理如何区分? 有边界数据和无边界数据如何区分?批处理中如何提高CPU利用率?什么是事件时间和处理时间?Workflow设计模式指的什么

Hyperledger Fabric 应用实战(1)--前期准备

本应用示例基于Hyperledger fabric2.4搭建一个自由房屋租赁区块链系统freerent,用户可以自由在链上开展合同签订、执行和验真。freerent应用背景相对简单,当前应用搭建示例展示 fabric初级功能。

基于springboot的ShardingSphere5.2.1的分库分表的解决方案之分表解决方案(一)

基于springboot的ShardingSphere5.2.1的分库分表的解决方案之分表解决方案

filebeat同时采集多个日志时,logstash和filebeat的文件配置

filebeat同时采集多个日志时,logstash和filebeat的文件配置

Clickhouse一级索引优化方案

Clickhouse一级索引优化方案及知识点

kafka如何保证消息不丢失?半分钟的答案和半个小时的答案有点不一样。

​ 关于Kafka保证消息不丢失的问题,就简单总结到这里,但这其实并不是结束。相反,随着你对Kafka理解得越深,你会发现这个问题会有更多的发散空间。像MQ如何保证消息不丢失?如何不重复消费?如何处理消息积压?等等,这都是一系列非常开放的面试题。对于你是否真正理解了每个MQ产品,是非常好的检验标准。

Spark的基本概念与架构

Spark的基本概念与架构

HDFS高可用配置及其高可用集群搭建

HDFS的HA(高可用)的背景、造成故障的原因以及解决方案,同时介绍了HA的解决方案-QJM 并详细记录了HA集群搭建的过程

分布式文件系统

要理解分布式文件系统首先了解什么是文件系统。查阅百度百科:文件系统是负责管理和存储文件的系统软件,操作系统通过文件系统提供的接口去存取文件,用户通过操作系统访问磁盘上的文件。下图指示了文件系统所处的位置:常见的文件系统:FAT16/FAT32、NTFS、HFS、UFS、APFS、XFS、Ext4等。

CDH6.3.2整合DolphinScheduler3.0.0

CDH6.3.2整合DolphinScheduler3.0.0测试通过,正常启动

Rabbitmq学习笔记(尚硅谷2021)

rabbitmq学习笔记(尚硅谷)

云计算导论(第二版)李伯虎著全部课后题的答案

李伯虎版云计算全部课后题

在Linux系统中安装Hadoop(简易版)

Hadoop安装(简易版),适合刚入门大数据的朋友,简单好上手,轻松安装Hadoop。

VMware 搭建 hadoop 完全分布式集群

VMware 虚拟机搭建 hadoop 完全分布式集群,集成 Spark、HBASE、Hive 等

三晶电气冲刺A股上市:计划募资12亿元,卢雪明与幸志刚为实控人

在本次上市前的股权架构中,海汇财富持股15.87%,李明智持股5.71%,晶英荟持股4.76%,三晶投资持股4.38%,董事、总经理欧阳家淦持股3.66%,石顺才持股2.86%,李云持股0.48%,王威持股0.45%。据招股书介绍,三晶电气的主营业务为光伏并网逆变器、储能逆变器及系统、电机驱动与控制

Doris-1.2.0安装部署详细流程

Doris是一个MPP的OLAP系统,以较低的成本提供在大数据集上的高性能分析和报表查询功能。MPP (Massively Parallel Processing),即大规模并行处理。简单来说,MPP是将任务并行的分散到多个服务器和节点上,在每个节点上计算完成后,将各自部分的结果汇总在一起得到终的结

【分布式系统】分布式事务(2PC 3PC TCC 最终一致性)

在分布式系统中,我们一般会根据业务对服务进行划分,这就会存在一些服务间的调用关系,所以普通的本地事务是满足不了我们的要求了,需要引入分布式事务来实现我们的一致性的要求。这里对事务进行一个简单的介绍:同学A给同学B转250块钱,系统首先从同学A的银行卡扣除250块钱,如果上述这个步骤成功了,但是系统往

来聊一聊 ElasticSearch 最新版的 Java 客户端

可能不少小伙伴都注意到了,从 ElasticSearch7.17 这个版本开始,原先的 Java 高级客户端Java High Level REST Client 废弃了,不支持了。老实说,ElasticSearch 算是我用过的所有 Java 工具中,更新最为激进的一个了,在 Es7 中废弃了 T

RabbitMQ(四):RabbitMQ高级特性

说明:因为在yml配置文件中定义消息路由失败时的策略为true,所以当消息从交换机路由到队列失败时,会调用ReturnCallback每个RabbitTemplate只能配置一个ReturnCallback,因此需要在项目加载时添加配置:修改publisher服务,添加一个【配置类】:位置:conf

Kafka 生产者、消费者命令行操作

Kafka 生产者、消费者命令行操作

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈