【Openstack Train安装】四、MariaDB/RabbitMQ 安装
本章介绍了MariaDB/RabbitMQ的安装步骤，MariaDB/RabbitMQ仅需要在控制节点安装。
（未传知网）大数据环境下的隐私安全的图像特征提取及应用
因此，本研究的目的是针对大数据环境下的隐私安全问题，提出有效的图像特征提取与应用方法，以保证用户的隐私信息不被泄露。为了保护用户的隐私安全，本文提出了一种基于多方计算的图像特征提取方法，通过将参与计算的各方的图像数据进行加密处理，实现了对个人隐私的保护而不损失图像特征提取的效果。基于以上背景，本文旨
【Flink实战】Flink对接Kafka Connetor使用docker部署kafka
Docker 是一个开源的容器化平台，用于将应用程序和其依赖的环境打包成一个独立的容器，以实现应用程序的快速部署、可移植性和可伸缩性。0 传统的应用部署方式通常需要在目标环境中手动设置各种依赖项和配置，可能面临不同操作系统或软件版本之间的兼容性问题。而 Docker 可以通过容器的方式隔离应用程序和
Hive增强的聚合、多维数据集、分组和汇总
在多维分析场景下，我们可能会用到高阶聚合函数，例如CUBEROLLUP等。Hive、Spark、Presto等引擎都提供类似的高阶聚合函数，以对不同维度组合下的数据进行聚合统计Hive官方将这种分析称为GROUP BY子句增强的聚合、多维数据集、分组和汇总那么什么是增强聚合和多维分析呢？增强聚合是指
基于大数据的游戏数据统计可视化系统
在当前数字化时代，游戏产业的快速发展使得游戏数据呈现出爆炸式增长。为了更好地理解玩家行为、优化游戏体验并提高盈利能力，游戏公司对游戏数据统计和可视化分析的需求日益迫切。因此，《基于大数据的游戏数据统计可视化系统》这一课题应运而生，旨在为游戏行业提供高效、精确的数据支持，以满足市场对数据分析的需求。然
【大数据】Doris 构建实时数仓落地方案详解（二）：Doris 核心功能解读
Apache Doris 是由百度研发并开源的数据库项目。 Doris 2008 年开始在百度内部立项，经历了五个大版本的迭代后于 2017 年开源，2018 年进入 Apache 基金会孵化项目。2022 年 4 月 18 日正式发布 Doris 1.0，2022 年 6 月 16 日正式毕业，成
【SparkSQL】SparkSQL的运行流程 & Spark On Hive & 分布式SQL执行引擎
本文重点介绍、SparkSQL的运行流程、 SparkSQL的自动优化、Catalyst优化器、SparkSQL的执行流程、Spark On Hive原理配置、分布式SQL执行引擎概念、代码JDBC连接。
Hadoop MapReduce 统计汽车销售信息
本文将讨论如何使用Hadoop MapReduce来统计汽车销售信息。
CentOS7安装教程----图文详解
选择新CD/DVD (IDE) ---->使用ISO映像文件（选择CentOS 7 镜像存放的位置）---->关闭。选择自动配置分区（也可选择我要配置分区，此处喜欢则自动配置分区）---->完成。选择linux（L）---->CentOS 7 64位---->下一步。创建新的虚拟机--->选择自定义
ERP数据仓库模型
通过对主题域和实体的确定，可以更好地组织数据仓库中的数据，并为后续的数据分析和决策提供支持。通过对用户进行培训和知识转移，可以让用户更好地了解和使用数据仓库中的数据，同时也可以提高用户的工作效率和质量。根据企业的业务需求和目标，可以确定数据仓库的体系结构，包括数据的分层、数据模型的设计、ETL流程等
Spark-Core
一、RDD 编程二、累加器三、广播变量
分布式数据库HBase
HBase是一个分布式的、面向列的开源数据库HBase是Google BigTable的开源实现HBase不同于一般的关系数据库, 适合非结构化数据存储HBase是一种分布式、可扩展、支持海量数据存储的 NoSQL数据库。HBase是依赖Hadoop的。为什么HBase能存储海量的数据？因为HBas
探秘RabbitMQ：社区插件与扩展的奇妙世界【RabbitMQ 三】
本篇博客将引领你进入RabbitMQ的社区插件与扩展领域，揭示各种令人惊叹的功能和奇妙的应用场景。从高级队列特性到定制化插件，你将领略RabbitMQ社区的无限可能性。
HBase高阶（一）基础架构及存储原理
HBase是Hadoop生态系统中的一个分布式、面向列的开源数据库，具有高可伸缩性、高性能和强大的数据处理能力。广泛应用于处理大规模数据集。HBase是一种稀疏的分布式持久的多维排序map稀疏：对比关系型数据库和非关系型数据库，关系型数据库是以表格的形式进行存储，对存储的要求较高，每一行每一列都需要
Mac二进制安装RabbitMQ以及Erlang以及OpenSSL
二进制安装rabbitMq如果未安装OpenSSL直接启动rabbitmq会报这类错误{"init terminating in do_boot",{error,{crypto,{"no such file or directory","crypto.app"}}}}init terminating
Flink
前面说过有状态计算其实就是需要考虑历史数据而历史数据需要搞个地方存储起来Flink为了方便不同分类的State的存储和管理,提供了如下的API/数据结构来存储StateKeyed State 通过 RuntimeContext访问，这需要 Operator 是一个RichFunction。保存Key
大数据机器学习深度解读ROC曲线：技术解析与实战应用
本文全面探讨了ROC曲线（Receiver Operating Characteristic Curve）的重要性和应用，从其历史背景、数学基础到Python实现以及关键评价指标。文章旨在提供一个深刻而全面的视角，以帮助大家更好地理解和应用ROC曲线在模型评估中的作用。
Spark系列之Spark的RDD详解
Spark系列之Spark的RDD详解
2023_Spark_实验二十五：SparkStreaming读取Kafka数据源：使用Direct方式
通过终端模拟输入将数据输入到kafka集群，使用scala开发消费者消费kafka订阅的主题数据，实现词频统计。
Azkaban从入门到精通以及案例实操系列
Azkaban从入门到精通再到实战一文搞定
