Java中的文件解析——Excel解析
在日常的开发过程中,经常会使用到excel工作簿进行数据的保存,那么在java中,通常会使用第三方提供的技术来进行excel文件的解析,比如:Apache POI、JXL、Alibaba EasyExcel。本文则使用的是Apache POI。 目前Apache POI用的比较广泛的实
NiFi【部署 01】NiFi最新版本1.18.0下载安装配置启动及问题处理(一篇学会部署NiFi)
NiFi最新版本1.18.0下载安装配置启动及问题处理(一篇学会部署NiFi)
配置rabbitmq https SSL,springboot连接rabbitmq https
springboot连接rabbitmq https
2023版最新最强大数据面试宝典
2023年最新大数据面试宝典,目前已更新到第4版,广受好评!
从 Linux 安装到 Hadoop 环境搭建全过程
从 Linux 的最小化安装到 Hadoop 环境的搭建,尽可能详尽介绍每个步骤。
Hive简介
ETL:首先从数据源池中提取数据,将数据保存在临时暂存数据库中(ODS),然后执行转换为合适目标数据仓库系统的形式,然后将结构化数据加载到仓库中,已备分析。数据仓库层(DW):数据加工与整合,建立一致性的维度,构建可复用的面向分析和统计的明细事实表,以及汇总公共粒度的指标。操作型数据层(ODS):存
docker安装es
docker es
一文掌握SQLite3基本用法
一、基本语法 1.指令 .open filename --打开文件-- 注解.show --显示信息.q --退出.databases --显示数据库.help --帮助.dump --
MySQL数据库01——mysql的安装和配置(包含workbench安装,超详细)
MySQL安装,配置环境,下载对应的workbench管理工具。超详细
Doris集群环境搭建
首页 - Apache DorisJava语言开发,存储和维护集群的元数据,负责接收和解析用户的查询请求,规划查询计化,调度查询结果。C++语言开发,Doris 系统的计算和存储节点,根据FE生成的物理执行计划,然后进行查询(分布式,多节点并行执行查询,统一汇总),同时BE还会将数据存储为多副本。B
大数据 | 实验零:安装 Hadoop 伪分布式系统
实验零:安装 Hadoop 伪分布式系统
【建议收藏】华为OD面试,什么场景下会使用到kafka,消息消费中需要注意哪些问题,kafka的幂等性,联合索引等问题
1️⃣ 生产者端处理幂等性:Kafka 生产者端可以通过设置消息 ID 和序列号等方式来处理幂等性,确保同一条消息只会被写入一次,而不会被重复写入。2️⃣ 手动处理:如果自动重试无法解决消费失败的问题,可以通过手动处理来处理消费失败的消息,比如将其保存到文件或数据库中,以便后续处理或人工处理。5️⃣
微服务注册中心:Eureka详解
文章目录Eureka基础概念Eureka概述Eureka架构图Eureka集群架构图Eureka关键概念Eureka的自我保护模式创建Eureka服务端服务提供者cloud-provider-8001入驻进EurekaServer消费者模块入驻进EurekaServerEureka工作原理Eurek
nginx 代理kafka
本文通过nignx 80端口代理kafka9092端口。
MySQL分区表详解
通常情况下,同一张表的数据在物理层面都是存放在一起的。随着业务增长,当同一张表的数据量过大时,会带来管理上的不便。而分区特性可以将一张表从物理层面根据一定的规则将数据划分为多个分区,多个分区可以单独管理,甚至存放在不同的磁盘/文件系统上,提升效率。分区表的优点:数据可以跨磁盘/文件系统存储,适合存储
关于hive无法正常启动(个人存档)
#此文仅作为本人问题解决过程存档环境:VM、CentOS、Xshell问题:输入hive后无法正常启动hive,并有如下提示 错误原因:hdfs 和yarn没有完全启动(主要是namenode无法正常启动)解决方法:1.jps 查看当前进行进程2.hadoop namenode -format
HIVE和HBASE的区别和联系
Hive和HBase都是Hadoop集群下的工具,Hive是对MapReduce的优化,而HBase则是HDFS数据存储的大管家。那么,这两者各适用于哪些场景呢?
尚硅谷大数据技术Hadoop教程-笔记03【Hadoop-HDFS】
尚硅谷大数据技术Hadoop教程-笔记03【Hadoop-HDFS】
Flink系列Table API和SQL之:表和流的转换
Flink系列Table API和SQL之:表和流的转换
【快速掌握RabbitMQ到实战】
● 消息队列(Message Queue)是一种用于在应用程序之间传递消息的通信方式,消息队列允许应用程序异步地发送和接收消息,并且不需要直接连接到对方。● 消息(Message)是指在应用间传送的数据。消息可以非常简单,比如只包含文本字符串,也可以更复杂,可能包含嵌入对象● 队列(Queue)可以