Flink中Barrier对齐机制
Barrier对齐机制以及Unaligned Checkpoints详解
Flink四大基石
CheckpointStateTimeWindow
ElasticSearch由浅入深
ElasticSearch由浅入深全套入门知识整理
Spark追妻系列(TopN案例和动作算子)
Spark中的TopN案例
大数据看惊天逆转+绝杀，亚洲杯时隔16年夺冠，恭喜女足
这个逆转真的是看得人热泪盈眶，女足姑娘们诠释了真正的足球精神！中国精神！全力以赴，一以贯之！铿锵玫瑰！
深入浅出Apache DolphinScheduler
Apache DolphinScheduler 是一个大数据调度任务框架。从当前的CSDN GitCode热度来看，在二月份排名第6位。那是相当的热门。Apache DolphinScheduler 是Apache旗下的开源项目，目前已经被Fork了2700次，Star了7.3k；这还是相当厉害了！
【大数据】OLAP架构及技术实现的演进简介
文章目录一、架构分类二、技术演进1、传统关系型数据库时期2、大数据技术时期一、架构分类OLAP名为联机分析，又称多维分析，什么是多维分析，指的是多种不同的维度审视数据，进行深层次分析。进行分析必不可少对数据进行下钻、上卷、切片、切块、旋转等操作，为了更加直观，我们可以使用立方体来表示。下钻：从高层次
基于疫情实时大数据报告数据，我用 Pyecharts 库制作了省位地图和轮播图
前几天有个学生娃子找我帮忙做点可视化的作业，其实倒是也不难，觉得挺有意思，这里拿出来给大家分享，主要是完成了轮播图的制作，显得作业高大上一些。需要技术交流，文末提供。数据来源首先是数据来源，来自百度疫情实时大数据报告，如下图所示。实现过程新增感染病例这里直接上代码和效果图，如下所示：from pye
2022虎年的期望和新年Flag
虎年到！10位科学家立下新年Flag，我们共同见证应《中国科学报》之邀，回答了两个问题：对2022有什么样的工作和生活上的期待？请立3个具体的新年Flag。以下为我的回复：1、对2022年的期待近年来，以RISC-V为代表的开源芯片生态呈现加速发展的趋势，但仍缺乏里程碑式的突破性进展。相比而言，20
[4] Flink大数据流式处理利剑: Flink集群安装和运行
本节笔者总结了如何在一个机器上安装集群，以及在多个机器上安装集群；并提到了通过zookeeper可以让Flink集群的Master节点也保持高可用；最后演示了如何部署一个SocketWindowWordCount.jar的例子，并在Flink的Web UI上面观察其job的执行情况和输出！
客快物流大数据项目(二十五)：初始化业务数据
目录初始化业务数据一、安装OGG源端1、在Oracle中创建OGG相关的用户和表空间2、OGG源端初始化二、配置OGG源端1、Oracle创建物流相关表2、配置管理器MGR进程3、配置extract进程4、配置pump进程5、配置define文件三、配置OG
2022年大数据即将带来的5个重要变化
目录1. 大数据将成为一个外交政策问题2. 大数据优化招聘和培训3. 实时分析维持电子商务4. 数据中毒愈演愈烈5 绿色数据中心的兴起大数据在2022年达到新的高度大数据已经改变了许多行业的运营方式。现在，大流行加速了全球的数字化转型，该领域的增长速度超过了大多数人的预期。这种前所未有的增长无疑将在
客快物流大数据项目(二十二)：Docker环境中安装软件
Docker环境中安装软件一、安装JDK
女生学大数据好还是计算机好？都适合女生吗？就业前景好吗？
女生学大数据好还是计算机好？都适合女生吗？就业前景好吗？提起理工类专业，特别是工科专业，很多女生都会望而却步，而社会对于女生学工科专业的认可度也比较低。但随着女性职业优势的逐渐展现，这种传统的观念已经逐渐被摒弃，女生同样能选择工科专业。不过，相比较而言，大部分女生在逻辑思维和理科思维方面确实会弱于男
一天学完spark的Scala基础语法教程七、数组(idea版本)
????前言????????博客主页：红目香薰_CSDN博客-大数据,计算机理论,MySQL领域博主????✍本文由在下【红目香薰】原创，首发于CSDN✍????2022年最大愿望：【服务百万技术人次】????????初始环境地址：【spark环境搭建(idea版本)_红目香薰-CSDN博客】???
hive中多表full join主键重复问题
目录0. 其他1. 问题描述2. 问题复现2.1. 建表语句2.2. 插入数据2.3. 查询SQL以及问题3. 问题原因4. 问题解决0. 其他1. 问题描述在Hive中（其他类似SQL，比如PostgreSQL可能也存在此问题），当对多张表（3张及以上）进行full join时，会存在每张表的主键
【华为云ModelArts】从0到1进阶AI开发达人
带你快速了解ModelArts什么是ModelArts？ModelArts 是面向开发者的一站式 AI 平台，为机器学习与深度学习提供海量数据预处理及交互式智能标注、大规模分布式训练、自动化模型生成，及端-边-云模型按需部署能力，帮助用户快速创建和部署模型，管理全周期 AI 工作流。ModelArt
玩转 StarRocks on ES 全文检索
目录部署ES下载Config系统参数启动VerifySR 外表测试2：全文检索插件ESSR部署ES 下载 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.16.2-linux-x86_64.tar.g
Flink Table/SQL自定义Sources和Sinks全解析（附代码）
动态表是Flink Table和SQL API处理有界和无界数据的核心概念。在Flink中，动态表只是逻辑概念，其本身并不存储数据，而是将表的具体数据存储在外部系统（比如说数据库、键值对存储系统、消息队列）或者文件中。动态源和动态写可以从外部系统读写数据。在下面的描述中，动态源和动态写可以归结为co
Python大数据-电商产品评论情感数据分析
一、项目背景网上购物已经成为大众生活的重要组成部分。人们在电商平台上浏览商品并购物，产生了海量的用户行为数据，用户对商品的评论数据对商家具有重要的意义。利用好这些碎片化、非结构化的数据，将有利于企业在电商平台上的持续发展，同时，对这部分数据进行分析，依据评论数据来优化现有产品也是大数据在企业经营中的
