浅谈比特币原理
中本聪设计了一个方案:每10分钟打一个包,最开始这一个包会奖励 打包者50个BTC,每生成21万个包,也就是每过4年,奖励就减半,到目前为止,现在的打包奖励是6.25个BTC。50*6(1个小时6个10分钟)*24(一天24个小时)*365(一年365天)*4(每4年减一半)*(1+2/1+4
SpringBoot项目添加WebService服务
SpringBoot项目添加WebService服务
hadoop的组件有哪些
Apache Hadoop是一个分布式计算系统,它主要由以下几个组件组成:Hadoop Distributed File System(HDFS):这是Hadoop的分布式文件系统,负责存储大量的数据,并且能够以容错的方式进行读写。MapReduce:这是Hadoop的核心组件,它负责处理大规模的数
学大数据需要java学到什么程度
大数据需求越来越多,只有技术在手不愁找不到工作。学习大数据需要掌握什么语言基础?
Flink系列之Flink中StateBackend深入剖析和应用
Flink系列之Flink中StateBackend深入剖析和应用
ZooKeeper【集群模式】
ZooKeeper集群配置信息、选举机制以及群起脚本
大数据工程专业技术证书考试-数据分析与应用
数据分析与应用根据大纲整理
[spark]spark资源分配
(1*4即4个节点共4个executor)*4=16,总cpu为32线程 8/16=1/2。每个executor内存数=该节点可用的总内存数/该节点executor数=16G/1=19G(这里因为executor num实在太小,所以随便选了16)但是一般cpu:内存=1:2-1:4,阿里云封装的时
一百一十三、DBeaver——从hive同步数据到clickhouse
DBeaver——从hive同步数据到clickhouse
Flink作业任务的9种状态简单介绍
当创建一个Flink任务后,该任务可能会经历多种状态。目前Flink给任务共定义了9种状态,包括:`Created`,`Running`,`Finished`,`Cancelling`,`Canceled`,`Restarting`,`Failing`,`Failed`,`Suspended`。
大数据开发之windows安装hadoop教程
本文主要介绍如何在windows上安装hadoop
Hive ---- 文件格式和压缩
为了支持多种压缩/解压缩算法,Hadoop引入了编码/解码器,如下表所示:Hadoop查看支持压缩的方式hadoop checknative。Hadoop在driver端设置压缩。
Hadoop
CentOS下Hadoop的安装和配置,有问题欢迎大家评论区交流!!!
百万级sql server数据库优化案例分享
在我们的IT职业生涯中,能有一次百万级的数据库的优化经历是很难得的,如果你遇到了恭喜你,你的职业生涯将会更加完美,如果你遇到并解决了,那么一定足够你炫耀很多年。这里我将要分享一次完美的百万级数据库优化经历,希望能给在IT行业的小伙伴一点启发和帮助。本篇分三步走:1、遇到问题;2、分析问题;3、解决问
Prometheus实战教程:监控Kafka消息
使用prometheus+Grafana+kafka_exporter+kafka实现监控Kafka运行状态
ES_深度分页概念与解决方案
Es深度分页概念与解决方案
[选型] 实时数仓之技术选型
关于实时数仓的选型● 如果选择hbase,建议选择kudu● 如果选择kudu, 还可以选择doris● 如果选择doris,建议选择iceberg
Flink Web UI不能访问
Flink Web UI无法正常访问排查过程
HIVE基础-文件存储格式
对 HIVE 文件四种主要存储格式(textfile、sequencefile、orc、parquet)进行详细介绍
Hadoop和Hbase版本对应关系(参考官网)
Hadoop和Hbase版本对应关系(参考官网)