SpringBoot集成ElasticSearch实现聚合查询
Java集成ElasticSearch实现聚合查询
初探StarRocks V2.1.3之踩坑记录
当前项目中，数据部分整体采用Hive/SparkSQL+ES+HBase的架构，Hive/SparkSQL用于离线分析，ES+HBase用于实时查询。当业务规模不是那么庞大的时候，这套架构多少显得有点重。于是寻求一种轻量级解决方案，既满足离线分析的需求，又满足明细查询的需求。首先想到的是支持流批一体
大数据综合项目--网站流量日志数据分析系统(详细步骤和代码)
文章目录前言：基本概述Sqoop概述什么是SqoopFlume概述什么是Flume为什么需要flumeHIve概述什么是Hive系统背景：模块开发数据采集使用Flume搭建日志采集系统数据预处理实现数据预处理数据仓库开发数据导出日志分析系统报表展示前言：提示：这里简述我使用的版本情况：ubuntu1
百度沙翔宇：百度云原生混部大规模落地实践之路
将在线、离线任务混合部署到相同物理资源上，保证服务稳定性
SpringBoot整合RabbitMQ--重试/消息序列化--方法/实例
本文用示例介绍SpringBoot整合RabbitMQ时如何进行重试，如何进行消息的序列化。
openstack详解（四）——openstack rabbitmq安装与启动
今天继续给大家介绍Linux运维相关知识，本文主要内容是Openstack rabbitmq安装与启动。一、rabbitmq安装二、rabbitmq用户创建和授权三、rabbitmq_management监控插件开启
使用Flink CDC 2.2.1进行ETL
flink cdc 2.0，本人最新研究成果 本文将展示如何基于 Flink CDC 2.2.1快速构建 针对MySQL 和 Oracle 的流式 ETL。演示基于Java语言，使用Maven。
利用Python进行数据分析系列之：DataFrame
DataFrame是一个表格型的数据结构，含有一组有序的列，妹列可以是不同的值类型(数值、字符串、布尔值等)。DataFrame即有行索引也有列索引。一、构建DataFrame构建DataFrame
一文细数100+个数据分析指标
这一、用户数据指标IP（Internet Protocol）：独立IP数。UV（Unique Visitor）：独立访问客数。PV（Page View）：页面浏览量/阅读量。VV（Visit View）：访问次数。一、用户数据指标IP（Internet Protocol）：独立IP数。UV（Uniq
跟数据打交道的人都得会的这8种数据模型，满足工作中95%的需求
其实模型的使用只是为我们从杂乱无序的海量数据中找到一条最方面、最省力、最有效的捷径。通过数据模型你可以清晰的知道收集哪条数据、分析哪个指标、从哪个维度能更快的获得你想要的结果，至于模型的叫什么并不重要，会用就行。
【大数据】HiveQL关于数据库和表的操作命令
HiveQL关于数据库和表的操作命令HiveQL 是 Hive 查询语言。Hive 和 MySQL 最接近，但二者仍存在显著差别。Hive 不支持行级插入操作、更新操作和删除操作。Hive 也不支持事务。Hive 中数据库的概念，本质上仅仅是表的一个目录或者命名空间。如果用户没有显式指定数据库，那么
大数据发展前景及就业方向【大数据专业讲座】
1、选择一门重点学习的编程语言：Java或者Python2、学习必备的数据库、Linux操作系统3、根据不同的方向针对性强化 - 大数据开发方向：一定要去钻研Hadoop平台及其组件、Hive数据仓库、Spark交互计算框架等。
在云计算大数据学习中心学习的第一天
何为计算机网络 ：计算机网络主要包括以下技术：1.云技术：①云存储（例百度网盘） ②云计算（例分布式计算）2.计算机技术：①抽象语言 ——>电信号②抽象语言 ——>编码 ——>应用层③编码 ——>二进制——>表示层④二进制 ——>电信号——>介质（硬件）访
Python数据分析报告
业务背景：B2B业务已收会员和服务费作为收益主要来源，目前会员类型分成钻石会员、金牌会员，销售合同一般会包含会员服务、增值服务、广告服务等等，销售过程可能会受到销售策略的影响，做一些业务的促销优惠或者折扣。每年的订单含新客户签约和老客户续约两种，同时合同期间也会出现服务加购或者变更的问题。问题研究：
FlinkToMySql两阶段提交
TwoPhaseCommitSinkFunction
数据湖（五）：Hudi与Hive集成
Hudi与Hive集成原理是通过代码方式将数据写入到HDFS目录中，那么同时映射Hive表，让Hive表映射的数据对应到此路径上，这时Hudi需要通过JDBC方式连接Hive进行元数据操作，这时需要配置HiveServer2。
第3期：零基础在校大学生应该如何学习大数据？
目前大数据是一个非常有发展前景的岗位，在IT界薪资待遇也很高，很多人想从事这方面的工作，那零基础的在校大学生应该如何学习大数据呢？
Kafka集群部署与测试
1、下载、解压安装包：将安装包上传到master节点中的/opt/software目录下，并将安装包解压到/opt/moduel，再命名为kafka 具体命令如下：tar -zxvf kafka-2.11-2.0.0.tgz -C /opt/modulemv kafka-2.11-2.0.0.tgz
数据湖（四）：Hudi与Spark整合
默认Spark操作Hudi使用表类型为Copy On Write模式。Hudi与Spark整合时有很多参数配置，可以参照https://hudi.apache.org/docs/configurations.html配置项来查询，此外，整合时有几个需要注意的点，如下:Hudi这里使用的是0.8.0版
牛客题霸刷题-SQL必知必会50道
SQL每个人都要用，但是用来衡量产出的并不是SQL本身，你需要用这个工具，去创造其它的价值。
