最新版Flink CDC MySQL同步MySQL（一）
Flink CDC 是Apache Flink ®的一组源连接器，使用变更数据捕获 (CDC) 从不同数据库中获取变更。Apache Flink 的 CDC Connectors集成 Debezium 作为捕获数据更改的引擎。所以它可以充分发挥 Debezium 的能力。
虚拟机扩容Ubuntu20.04教程
虚拟机内存不足、磁盘空间过小导致蓝屏问题
Kafka中产生数据积压的原因以及解决方案
Kafka中产生数据积压的原因以及解决方案。
hive-sql保留n位小数
hive-sql保留n位小数，round方法和cast as decimal方法比较。
下一个风口会是什么行业？
随着计算机技术和算法的不断发展，人工智能已经开始应用于各个领域，如医疗、金融、制造等。无论是人工智能、生物科技、新能源还是虚拟现实，它们的发展都需要政府、企业和投资者的共同努力。我们期待这些行业的蓬勃发展，同时也期待更多的新兴产业不断涌现，为人类社会的进步和发展作出更大贡献。随着基因编辑技术的出现和
判断hadoop伪分布式安装模式是否成功启动
判断hadoop伪分布式安装模式是否成功启动
Hudi（16）：Hudi集成Flink之读取方式
如果将全量数据(百亿数量级) 和增量先同步到 kafka，再通过 flink 流式消费的方式将库表数据直接导成 hoodie 表，因为直接消费全量部分数据：量大（吞吐高）、乱序严重（写入的 partition 随机），会导致写入性能退化，出现吞吐毛刺，这时候可以开启限速参数，保证流量平稳写入。通过参
Python获取全部股票数据
使用Python获取股票数据
Google Earth Engine（GEE）计算热度（LST）
今天来分享一下如何在GEE中计算热度，用地表温度来反演LST
解决Dolphinscheduler跨任务流依赖
解决Dolphinscheduler跨任务流依赖
2022年国家社会/自然科学基金立项名单
2022年国家社会科学+自然科学基金立项名单
数据血缘Atlas Rest-API使用
Type即元数据类型定义，这里可以是数据库、表、列等，还可以细分spark表(spark_table)，hive表(hive_table)等，atlas自带了很多类型，如DataSet，Process等，一般情况下，数据相关的类型在定义类型的时候都会继承DataSet，而流程相关的类型则会继承Pro
大数据ETL工具对比（Sqoop, DataX, Kettle）
DataX和Kettle都是通用的数据集成工具，支持多种数据源和目标，提供了强大的数据转换和清洗功能。DataX和Kettle的区别在于开发者和用户群体，DataX在阿里巴巴内部得到广泛应用，而Kettle则是一个独立的开源项目。Sqoop主要用于Hadoop和关系型数据库之间的数据传输，适用于大规
hive、pg库，建表语句及查询表结构语句
hive、pg库，建表语句及查询表结构语句
【Elasticsearch教程8】Mapping字段类型之keyword
Elasticsearch keyword constant_keyword wildcard类型
Flink CDC 2.4 正式发布，新增 Vitess 数据源，更多连接器支持增量快照，升级 Debezium 版本
Flink CDC [1] 是基于数据库的日志 CDC 技术，实现了全增量一体化读取的数据集成框架。配合 Flink 优秀的管道能力和丰富的上下游生态，Flink CDC 可以高效实现海量数据的实时集成。
大数据存储系统HDFS和对象存储(OOS/S3)的比较
虽然Apache Hadoop以前都是使用HDFS的，但是当Hadoop的文件系统的需求产生时候也能使用S3。Netflix的利用这个特性把数据存储在S3上而不是HDFS上。笔者曾经工作经历的大数据集群存储都是用HDFS，当前工作接触到对象存储S3，在实践中比较两者的不同之处。
HDFS集群部署成功但网页无法打开如何解决（显示配置通过浏览器访问hdfs的端口）
HDFS集群部署成功（3台虚拟机）但是网页端无法打开，通过显示指定端口解决！！
RocketMQ的消费模式和消息流控
RocketMQ的消费模式和消费流控
SQL使用技巧(3.2)递归层次查询Hive、Orcale和TDH
递归层次查询的orcale 和 hive实现，hive实现主要依赖于支持orcale语法
