RabbitMQ
之前的请求都是同步调用虽然时效性较强，可以立即得到结果 但是同步调用存在以下问题： 1.耦合度高 2.性能和吞吐能力下降 3.有额外的资源消耗 4.有级联失败问题2、解决方案-RabbitMQ2.1、简介 MQ全称为Message Queue，即消息队列。&ldq
数据质量怎么监控
数据质量监控方法论
linux虚拟机搭建kafka（单节点、使用kafka自带zookeeper）
本文使用kafka单节点安装及配置，并使用kafka自带的zookeeper。一般kafka需要起三个kafka构成集群，可以连单独的zookeeper，本文不涉及。linux需要开启防火墙，否则可能出现外部连不上虚拟机的kafka的情况。修改kafka/bin/config下的zookeeper.
如何保证 RabbitMQ 消息不丢失？
如果需要保证消息在整条链路中不丢失，那就需要生产端、mq自身与消费端共同去保障。生产端：对生产的消息进行状态标记，开启confirm机制，依据mq的响应来更新消息状态，使用定时任务重新投递超时的消息，多次投递失败进行报警。mq自身：开启持久化，并在落盘后再进行ack。如果是镜像部署模式，需要在同步到
Hive、Hbase、TiDB、Gbase的区别
在数据库不断发展的今天，尤其是大数据技术的发展，不断的涌现出各种海量数据存储及分析的数据库及相关工具令人演化缭乱，有的基于Hadoop构建，有的基于分布式理论自行构建，但是这些工具和数据库之间究竟有什么区别，都使用于什么场景，在查询了相关材料之后我进行了一个简单的总结，以备后用
【Spring Cloud系列】- Eureka使用详解
认识微服务注册中心：虽然Eureka已经停止维护，但微服务架构在当今非常流程，学习Eureka可以更好的理解微服务。便于老旧系统维护：如果使用微服务，公司一定会存在使用Eureka服务的应用系统，学习Eureka便于储备老旧系统维护的能力。Eureka是Netflix的一个子模块，也是核心模块之一。
Superset的安装(亲测三遍，有效)
Apache Superset是一个开源的、现代的、轻量级BI分析工具，能够对接多种数据源、拥有丰富的图表展示形式、支持自定义仪表盘，且拥有友好的用户界面，十分易用。在学习数仓项目的时候，按照教程安装Superset反复重复多次都没能成狗，最后稍微修改之后得以成功安装，现记录下安装过程。
Zookeeper使用
ZooKeeper是一个集中的服务，用于维护配置信息、命名、提供分布式同步和提供组服务。所有这些类型的服务都以某种形式被分布式应用程序使用。每次它们被实现时，都会有大量的工作来修复不可避免的错误和竞争条件。由于实现这些服务的困难，应用程序最初通常会略过这些服务，这使得它们在出现更改时变得脆弱，并且难
大数据开发之CDH使用搭建大数据平台
介绍CDH，并介绍使用其搭建大数据平台的详细步骤
mmsegmentation中可视化
samples_per_gpu=1, ## 单个 GPU 的批量大小workers_per_gpu=4, ## 为每个 GPU 预取数据的 Worker。
Flink oracle cdc - Oracle Logminer CDC性能问题
Flink Oracle CDC 性能
基于SEIR微分方程模型对疫情传播的简单预测
目录一、模型的建立传染病模型概念模型假设SEIR模型 模型中涉及的函数S(t)、E(t)、I(t)、R(t)更改后的微分方程二、模型的求解三、模型的缺点祝语随着疫情的再次爆发，全国疫情防控再次进入紧张状态，疫情预测分析成为数学建模问题中的一个热点问题，本文基于微分方程的
基于Spark技术的银行客户数据分析
大数据实验教学系统案例：银行客户数据分析某银行积累有大量客户数据，现希望大数据分析团队使用Spark技术对这些数据进行分析，以期获得有价值的信息。本案例用到的数据集说明如下： 数据集文件：/data/dataset/bank-full.csv 该数据集包含银行客户信息，其中部分字段的说明如下：1
【Hive】安装配置及导入Hdfs数据
一文带你了解Hive的安装配置，供大家参考！
2023最新版彩虹商城时光模板知识付费系统源码 [升级版]
内有5000+商品，搭建即可运营，无需自己上架，公益版免费使用（无需授权）1.新增腾讯oss跳转2.添加虚拟金额3.修复分销系统4.修复发圈问题。
NIFI1.21.0最新版本安装_采用HTTP方式_搭建集群_实际操作---大数据之Nifi工作笔记0050
还有个地方注意:先修改完一个机器上的nifi,然后再去同步到其他机器上去,把整个nifi-1.21.0文件夹,同步以后只需要修改对应的ip地址就可以了,注意如果用了https,需要先设置用户名密码,设置以后,然后再同步到其他机器上去,这样的话,三台机器的用户名密码就一样了.英文写的,凡是好东西,肯定
期末复习-大数据技术原理与应用
NoSQL，泛指非关系型的数据库。NoSQL数据库的产生就是为了解决大规模数据集合多重数据种类带来的挑战，特别是大数据应用难题。特点，灵活可扩展，灵活的数据模型，与云计算紧密相连兴起的原因，海量数据的需求，数据高并发的需求，无法满足可扩展和高可用性的需求。
基于hadoop和echarts的教育大数据可视化系统 毕设完整的代码
基于hadoop和echarts的教育大数据可视化系统 毕设完整的代码
手把手教你做多重线性逐步回归
某研究收集到美国50个州关于犯罪率的一组数据，包括人口、面积、收入、文盲率、高中毕业率、霜冻天数、犯罪率共7个指标，现在我们想考察一下州犯罪率和哪些指标有关。数据上传SPSSAU后，在 “我的数据”中查看浏览原始数据，前5行数据如下：图1 “我的数据”查看浏览数据集线性回归中要求自变量为连续型数据，
物联网工程
物联网工程专业的学生通常还会参与实践项目，包括物联网系统的设计与开发、传感器网络的搭建和数据分析等。物联网工程专业是指专门培养和培训学生在物联网领域从事设计、开发和管理物联网系统的专业领域。物联网系统产生大量的数据，物联网工程师需要设计数据管理方案，包括数据存储、数据传输和数据分析。物联网工程师需要
