Android跨进程传图片或者大数据（解决TransactionTooLargeException）
优势效率相对最高传递图片没有大小限制劣势使用相对麻烦，需要自定义aidl相关代码可能有侵入性，必须在四大组件中接收。/***/
Kafka
数据传输的事务定义通常有以下三种级别：（1）最多一次: 消息不会被重复发送，最多被传输一次，但也有可能一次不传输（2）最少一次: 消息不会被漏发送，最少被传输一次，但也有可能被重复传输.（3）精确的一次（Exactly once）: 不会漏传输也不会重复传输,每个消息都传输被一次而且仅仅被传输一次，
Spark搭建日志，记录一些踩过的坑
本文记录在搭建hadoop与Spark的standalone模式中踩过的坑，有一定的借鉴作用
【大数据】Redis介绍和使用
Redis（Remote Dictionary Server）是一个开源的基于内存的数据结构存储系统，它提供了丰富的数据结构（如字符串、哈希表、列表、集合、有序集合等），并支持多种操作（如读取、写入、删除、排序、计数等），具有高性能、持久化、复制、集群、事务等特性，被广泛应用于缓存、会话存储、消息队
Hive_last_value()
函数是一个窗口函数，用于返回窗口内的最后一个值。在同一分区内，窗口函数将独立计算每个分区。表示基于指定的列或表达式对行进行排序，这对于定义“最后”是基于什么顺序很重要。，它可能不会返回期望的结果。为了确保能够得到分区内所有行的最后一个值，可以使用。两列，以下SQL语句将返回每个分区（在本例中为每个日
RabbitmqMQ
RabbitMQ是一个功能丰富、可扩展性强的消息代理软件，适用于从简单的单体应用到复杂的分布式系统的消息传递需求。通过提供可靠的消息传递功能，它帮助应用实现解耦、异步处理、流量削峰等，提高整个系统的效率和弹性。它的设计和广泛的社区支持确保了它可以与现代云原生和微服务架构良好集成。2、RabbitMQ
Docker-Image
Docker镜像
Hive中的explode函数、posexplode函数与later view函数
在离线数仓处理通过HQL业务数据时，经常会遇到行转列或者列转行之类的操作，就像concat_ws之类的函数被广泛使用，今天这个也是经常要使用的拓展方法。
Kafka MQ 生产者
Kafka MQ 生产者
数据解读乡村发展！专家详解 2024 年（第 17 届）中国大学生计算机设计大赛大数据主题赛赛题
赛题希望大家做什么？作品提交的具体要求？评审将侧重哪些要点？范举教授培训实录，邀您一文读懂 2024 年（第 17 届）中国大学生计算机设计大赛大数据主题赛“数据解读乡村发展”赛题！
MQ(Rabbit MQ)基础知识
普通集群：多个服务共享 交换机、队列等元信息，但是不共享队列中存储的数据，而是其它服务保存指向存有真实数据队列的地址， 在保存或访问数据，访问节点中没有真实数据，会将信息转发到有真是信息的节点保存或获取数据，如果真实保存数据的节点宕机了，就无法保存获取数据了。消息消费者怎么知道去那个队列拿信息？死信
kafka（三）——librdkafka编译与使用（c++）
依赖库直接下载源码编译即可。生成c和c++动态库。
【2024年第三届中国高校大数据挑战赛】赛题 D：行业职业技术培训能力评价 思路+代码+参考论文
2024中国高校大数据挑战赛D题思路初步解析
Spark概述
结构化数据：即行数据,存储在数据库里,可以用二维表结构来逻辑表达实现的数据。非结构化数据：不方便用数据库二维逻辑表来表现的数据，包括所有格式的办公文档、文本、图片、XML、HTML、各类报表、图像和音频/视频信息等等。5.MapReduce和Spark的区别（1）Spark的速度比MapReduce
二次开发Flink-coGroup算子支持迟到数据通过测输出流提取
coGroup算子开窗到时间关闭之后，迟到数据无法通过测输出流提取，intervalJoin算子提供了api，因为join算子底层就是coGroup算子，所以Join算子也不行。flink版本 v1.17.1。
最详细数据仓库项目实现：从0到1的电商数仓建设（数仓部分）
其中业务总线矩阵，就像是一个分析的笔记.后面还会有各个属性值和度量值的统计等// 见讲义中第四个讲义数仓的第5章。
（二）RabbitMQ实战——rabbitmq高可用集群搭建
本节内容是关于rabbitmq高可用集群的部署搭建，使用的是centos7系统，我们准备三台服务器作为rabbitmq的高可用服务器，rabbitmq集群本身不是天然支持高可用的，我们通过配置rabbitmq服务器的镜像队列，以确保消息可以在集群中的多个节点上进行复制存储，提高可用性和容错性，避免单
RabbitMQ（任务模型,交换机(广播,订阅,通配符订阅)）
Work模型的使用：多个消费者绑定到一个队列，同一条消息只会被一个消费者处理通过设置prefetch来控制消费者预取的消息数量交换机的作用接收publisher发送的消息将消息按照规则路由到与之绑定的队列不能缓存消息，路由失败，消息丢失FanoutExchange的会将消息路由到每个绑定的队列Dir
【SQL相关】Hive行列字符串的合并与拆分
Hive行列字符串的合并与拆分。
【flink番外篇】11、Flink 并行度设置
系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink 部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink 的基础部分，比如术语、架构、编程模型、编程指南、基本的datastream api用法、四大基石等内容。3、Flik Table API和S
