springBoot使用rabbitmq并保证消息可靠性
1、rabbitmq在springboot中使用2、rabbitmq数据可靠性投递
大数据系列之：安装pulsar详细步骤
大数据系列之：安装pulsar详细步骤
详解clickhouse分区目录的合并过程
BlockNum 是一个整型的自增长型编号，该编号在单张MergeTree表中从1开始全局累加，当有新的分区目录创建后，该值就加1，对新的分区目录来讲，MinBlockNum 和 MaxBlockNum 取值相同。MergeTree的分区目录并不是在数据表被创建之后就存在的，而是在数据写入过程中被创
今天又get到一个小技能，collect_set函数
collect_set函数今天又get到一个小技能，掌握了hive一个关于列转行专用函数 collect_set函数。在这里做个学习笔记。collect_set是Hive内置的一个聚合函数, 结果返回一个消除了重复元素的对象集合, 其返回值类型是 array 。和collect_set相似的还有另一
【大数据技术Hadoop+Spark】Spark架构、原理、优势、生态系统等讲解（图文解释）
【大数据技术Hadoop+Spark】Spark架构、原理、优势、生态系统等讲解（图文解释）
spark on yarn 的执行过程以及日志分析
spark on yarn 的执行过程以及日志分析
Landsat Collection 2 数据集详细介绍（T1/T2产品差异）
第 2 层场景遵循与第 1 层场景相同的辐射标准，但不符合第 1 层几何规范，因为轨道信息不太准确（特定于旧的 Landsat 传感器） )、明显的云层覆盖、地面控制不足或其他因素。第 1 层包括 1 级精度和地形 (L1TP) 校正数据，这些数据具有良好的辐射特性，并在不同的 Landsat 仪器
Kafka中那些巧妙的设计
Kafka是一个分布式、多分区、基于发布/订阅模式的消息队列，具有可扩展和高吞吐率的特点。
【AI智能写作】怎样写一篇高质量热门火爆的技术文章？
怎样写出一篇高质量的文章？写一篇高质量热门火爆的技术文章需要以下几个步骤：找到您感兴趣的话题：选择一个您感兴趣的话题，这样您就会更有动力和热情地写作。同时，您也需要确保您选择的话题是热门和具有吸引力的，以吸引更多的读者。选择一个热门话题：选择一个人们正在关注的技术话题，并确保您的文章提供有价值的信息
Apache Flink X Apache Doris构建极速易用的实时数仓架构
Doris针对不同的应用场景提供了不同的数据模型，分别为：明细模型，主键模型和聚合模型。明细模型：明细数据存储（日志分析、行为分析）主键模型：相同key的数据覆盖更新（订单状态、用户状态）聚合模型：相同key列value列合并（报表统计、指标计算）
PySpark集群完全分布式搭建
本文的目的是使读者对spark的安装流程有一个清晰的认识，并且能根据本文的内容搭建一个属于自己的完全分布式Spark集群，并在此基础上增加pyspark的分布式环境。
华为数字化转型之道 实践篇 第九章 数字化运营：实现业务运营模式升级
业务运营是为了帮助企业基于自身业务战略，更好地达成企业经营与运营目标，这中间包含业务沿着流程周而复始地运转，以及在作业过程中识别并推动问题解决等过程。而，如图9-1所示。一方面，数字化运营成为各个企业数字化转型的必经之路，如果缺失，似乎就意味着企业的数字化转型是不完整的另一方面，我们也能够看到，数字
Linux安装Hadoop超详细教程
首先说明一下，本文的安装教程仅是针对个人的操作经验所写的。可能有些同学安装的时候觉得跟他的不一样，那可能是由于版本不一样所导致的。可以到如下网址下载：http://apache.stu.edu.tw/hadoop/common/hadoop-3.1.1/，即可查看相关信息。然后一个个尝试，我最终找到
yolov5 +cuda10.2 +gpu环境搭建 （详细版本）
YOLOv5是一种单阶段目标检测算法，该算法在YOLOv4的基础上添加了一些新的改进思路，使其速度与精度都得到了极大的性能提升。主要的改进思路如下所示：输入端：在模型训练阶段，提出了一些改进思路，主要包括Mosaic数据增强、自适应锚框计算、自适应图片缩放；基准网络：融合其它检测算法中的一些新思路，
RabbitMQ重复消费
rabbitmq
Kafka系列之：深入理解Kafka集群调优
Kafka系列之：深入理解Kafka集群调优
量化策略——准备3 数据、Backtrader回测框架与quantstats评价指标
我们一般使用这个库来获取股票数据或策略中用得到的数据：使用Backtrader框架作为回测的框架：使用quantstats库作为回测结果评价的库：这一部分准备好之后，后续我们将关注点主要放在【策略】上，对于数据、评价指标这些如无特殊处理，将不再赘述。整个量化的框架构造起来不太容易，如果以前有所了解，
Hadoop伪分布式安装搭建教程
2.1 在VMware上方菜单栏，文件--新建虚拟机 2.2 默认 2.3 选择稍后安装操作系统2.4 选择Linux（L），版本 Ubuntu 2.5 定义虚拟机的名称，选择虚拟机的位置，本人选择放在了D盘 2.6 处理器配置根据自己情况自己选择，这里选择了处理器数量2，内核数量2 2.7 虚拟
大数据周会-本周学习内容总结07
大数据周会-本周学习内容总结07
hadoop组成及其架构
HDFS读写数据流程以及优缺点MapReduce工作原理及shuffle详解yarn工作机制、调度器及调度算法
