flink 从kafka读取数据报错
这个依赖,还加了多余的kafkaclient依赖;
流式湖仓增强，Hologres + Flink构建企业级实时数仓
阿里云实时数仓Hologres研发负责人姜伟华现场分享Hologres+Flink构建的企业级实时数仓，实现全链路的数据实时计算、实时写入、实时更新、实时查询。同时，随着流式湖仓的兴起，Hologres除了支持Delta、Hudi等通用湖格式。
【大数据进阶第三阶段之Hive学习笔记】Hive安装
安装hadoop 以及 zookeeper、mysql《zookeeper的安装与配置》《Linux环境配置MySQL》
大数据开发---阿里云ECS上搭建Hadoop伪分布式环境（下篇）
" 2024-01-06 15:31:34,348 INFO common.Storage: Storage directory /opt/hadoop-3.3.1/etc/hadoop/tmp/dfs/name has been successfully formatted."---->表明。ha
集成Kafka：SpringBoot与Kafka的集成
1.背景介绍1. 背景介绍Apache Kafka 是一个分布式流处理平台，用于构建实时数据流管道和流处理应用程序。它可以处理高吞吐量的数据，并提供了一种可靠的、低延迟的方式来存储和处理数据。Spring Boot 是一个用于构建微服务应用程序的框架，它提供了许多预建的功能，以简化开发过程。在现代应
nginx+rsyslog+kafka+clickhouse+grafana 实现nginx 网关监控
上面都配置完了之后可以先验证下，保证数据最终到ck，如果有问题，需要再每个节点调试，比如先调试nginx->rsyslog ，可以先不配置kafka 输出，配置为console或者文件输出都可以，具体这里就不写了。这里做了一个类型转换，因为nginx，request-time 单位是s，我想最终呈现
hbase shell行键过滤正则匹配
在实际运维生产环境的过程中，经常遇到需要过滤rowkey包含部分字符的场景。以下列出可行的几种操作方式。
私有部署ELK，搭建自己的日志中心（六）-- 引入kafka对采集日志进行削峰填谷
首先，要说明一点，elk日志中心，是可以缺少kafka组件的。其次，如果是研发环境下，机器资源紧张的情况下，也是可不部署kafka。最后，因为kafka的部署是可以独立的，所以本文将另行部署，不和elk一起。
大数据-hive基本语法整理
hive基本语法一、hive建表语句create external table if not exists ods_base_org_info( id string comment '主键', org_code string comment
Hive实战：词频统计
通过这一系列的操作，我们深入学习了Hive的外部表创建、数据加载、查询、视图创建以及统计分析的操作。字段的内容按照空格分割成多个单词，并生成一个多行的结果集，每行包含一个单词。函数则将这个分割后的数组转换为多行记录，即每一行对应原字符串中的一个单词。统计每个单词分组的数量，结果将展示每个单词及其在原
Flink状态编程之按键分区状态
按键分区状态（Keyed State）顾名思义，是任务按照键（key）来访问和维护的状态。它的特点非常鲜明，就是以 key 为作用范围进行隔离。在进行按键分区之后，具有相同键的所有数据，都会分配到同一个并行子任务中；所以如果当前任务定义了状态，Flink 就会在当前并行子任务实例中，为每个键值维护一
大数据平台环境搭建---- Hbase组件配置
进入Hadoop安装目录的conf目录，将配置文件core-site.xml和hdfs-site.xml复制到HBase安装目录下的conf目录，用于HBase启动时读取Hadoop的核心配置信息和HDFS配置信息。在HBase安装目录下的conf目录，执行“vi backup-masters”命令
HiveSql中的分区分桶详解
;实际开发中, 如果数据量比较大的情况下,可以考虑采用 多级分区的思路来解决, 多级分区一般用 时间来分区, 可以是: 年, 月, 日...之前我们已经实现了静态分区, 即: 手动指定分区字段 和 分区字段值, 如果分区过多, 每次写分区字段值比较繁琐, 且有可能写错.计算绝对值的: 10。
8-Hive原理与技术
题目3：Hive分区字段不能与已存在字段重复，且分区字段是一个虚拟的字段，它不存放任何数据，该数据来源于装载分区表时所指定的数据文件。题目2：Sqoop是关系型数据库与Hadoop之间的数据桥梁，这个桥梁的重要组件是Sqoop连接器。题目3：Hive最重视的性能是可测量性、延展性、对于输入格式的宽松
CAS算法
概述CAS的全程是：Compare And Swap（比较并交换），CAS是实现并发计算时常用到的技术，Java并发包中的很多类都使用了CAS技术，如ConcurrentHashMap，AtomicInteger原子操作等CAS操作涉及到3个操作符：当前内存中的值、预估值、即将修改的新增，当且仅当预
2023你冲不冲，冲冲冲冲~~
2022的总结以及2023的展望（从csdn上获得了许多的奖品以及生活中的一些小趣事）
c++输入输出流
文章目录前言一、流二、使用步骤1.引入库2.读入数据总结前言最近在准备复试，学习c++，就当作是学习笔记了`一、流C++的I/O是以一连串的字节流的方式进行的。在输入操作中，字节从设备(例如，键盘、磁盘驱动器、网络连接等)流向内存。在输出操作中，字节从内存流向设备(例如，显示屏、打印机、磁盘驱动器、
操作系统原理——绪论：操作系统的概念、发展、类型、基本特征、功能、运行环境和内核结构
操作系统是配置在计算机硬件上的第一层软件，是计算机系统资源的管理者，位于硬件和其他软件之间，是所有其他软件的运行基础。这篇文章参考了学校老师的PPT并加入了自己的一些补充，主要讲解操作系统的概念、发展、类型、基本特征、功能、运行环境和内核结构。文字可能稍多，但读完一定收获颇丰。
优秀码农选择对象详细指南，看完记得要实战噢
2023年了，你是否已到了法定年纪，那么这一篇优秀码农选择对象的详细指南，你一定用得到，看完记得感谢狗哥哦！
别人在看世界杯，我却在玩“世界杯”？——C++Easyx世界杯版跑酷小游戏
别人在看世界杯，我却在玩“世界杯”？
