Presto 之Hash Join的Partition
在Presto中，当两表Join为Hash Join并且join_distribution_type为PARTITIONED的时候，Presto会将Build表分区（Partition）后再进行Join操作。
大数据学习（七）一分钟了解数据建模
数据建模 ER建模 维度建模
【云原生】Docker-compose部署flink
Apache Flink的数据流编程模型在有限和无限数据集上提供单次事件（event-at-a-time）处理。在基础层面，Flink程序由流和转换组成。Apache Flink的API：有界或无界数据流的数据流API、用于有界数据集的数据集API、表API。[3]数据流的运行流程Flink程序在执
大数据安全目前面临得主要挑战有哪些
根据大数据安全标准体系框架，通过对大数据基础标准、平台和技 术、数据安全、服务安全、行业应用五个类别的标准需求梳理，明确了大 数据安全标准化需求，通过对已发布及在研大数据安全相关标准的适用性 分析和大数据安全标准缺口分析，编制了如图3-2所示的大数据安全标准 规划，为我国近期的大数据安全标准的制修订
educoder-Spark机器学习
头歌Spark机器学习实训答案代码
ClickHouse及Greenplum与Doris性能对比
ClickHouse和DorisDB的对比：标准SQL语言支持ClickHouse：不支持标准SQL语言，无法直接对接主流的BI系统。DorisDB：支持标准的SQL语言，兼容MYSQL协议，可以直接对接主流的BI系统。分布式JoinClickHouse：几乎不支持分布式Join，在分析模型上仅支持
C++实现kafka的生产者客户端
一、Kafka 生产者的逻辑。二、Kafka 的C++ API。三、Kafka 生产者客户端开发。
【Python习题集7】Python对CSV文件数据进行可视化
我们要的不是数据，而是数据告诉我们的事实。大多数人面临这样一个挑战：我们认识到数据可视化的必要性，但缺乏数据可视化方面的专业技能。部分原因可以归结于，数据可视化只是数据分析过程中的一个环节，数据分析师可能将精力花在获取数据、清洗整理数据、分析数据、建立模型，但在最终的展示沟通上力不从心。可视化工具包
windows安装Zookeeper
Windows安装zookeeper，zookeeper环境变量配置
Ubuntu安装RabbitMQ server - 在外远程访问
RabbitMQ是一个在 AMQP(高级消息队列协议)基础上完成的，可复用的企业消息系统，是当前最主流的消息中间件之一。由erlang开发的AMQP（Advanced Message Queue 高级消息队列协议 ）的开源实现，由于erlang 语言的高并发特性，性能较好，本质是个队列，FIFO 先
ChatGPT 和 Elasticsearch：使用 ChatGPT 处理 Elastic 数据的插件
ChatGPT 插件是为帮助模型完成其知识或执行操作而开发的扩展。例如，我们知道 ChatGPT 从知识角度的割接时间是 2021 年 9 月，所以任何关于近期数据的问题都不会回答。此外，任何与超出模型训练范围的过于具体的问题相关的问题都不会得到回答。插件可以扩大可能的应用范围并增强模型的功能，但相
FLINK CDC postgresql (Stream与SQL)
FLINK CDC postgresql （Stream与SQL）
大数据毕业设计 共享单车数据分析与可视化系统 - Python
🔥 这两年开始毕业设计和毕业答辩的要求和难度不断提升，传统的毕设题目缺少创新和亮点，往往达不到毕业答辩的要求，这两年不断有学弟学妹告诉学长自己做的项目系统达不到老师的要求。为了大家能够顺利以及最少的精力通过毕设，学长分享优质毕业设计项目，今天要分享的是🚩基于大数据的共享单车数据分析与可视化🥇学
超详细教程在VMware上安装Ubuntu18.04系统
**## 安装VMware虚拟机https://blog.csdn.net/qq_37618797/article/details/81144163下载ubuntu18.04镜像链接：https://cn.ubuntu.com/desktop/做好上面两步之后，下面我们开始在VMware上安装ubu
Hadoop HDFS的API操作
IDEA创建Maven工程，由于版本不一样，这里我使用2022.3版本，有一个将junit加入classpath的设置，还有将各种目录设置：Mark Directory as ：src/main/java 关联为 Sources Root;在HDFS上面进行性文件a.txt的再一次校验值***，将1
CDMO医药行业龙头企业有哪些？如何系统的分析查看？
分析医药行业市场信息数据，除了上述两个数据库的信息外，还有药融云-市场信息-上市医药企业年报数据库可以查阅，该数据库记录了上市医药企业的年报、中报、季报，包括企业营业收入、净利润、研发投入及销售费用等信息，可通过企业名称或股票代码进行检索查询，并可筛选某个时间段的年报信息，是了解竞争对手或投资对象的
【头歌】Sqoop 操作 HBase - 详解
【主要内容】Sqoop 在HBase中导入；Sqoop 在HBase中导出。【实践内容】全过程解析及编程内容。
物联网架构实例—Ubuntu 安装RabbitMQ
Ubuntu一步步安装RabbitMQ，包含安装过程中遇到的问题及解决办法，以供后续翻阅。
Kafka极客 - 15 重设消费者位移 Offset
反之，如果你的场景需要较高的吞吐量，但每条消息的处理时间很短，同时你又很在意消息的顺序，此时，Kafka 就是你的首选。有时候你可能会碰到这样的场景：你修改了消费者程序代码，并重启了消费者，结果发现代码有问题，你需要回滚之前的代码变更，同时也要把位移重设到消费者重启时的位置，那么，Current 策
Hadoop伪分布式配置教程
【代码】Hadoop伪分布式配置教程。
