Java开发之实时计算--Flink
简介介绍计算框架对java开发的重要性介绍flink的架构介绍flink的基本概念:常用算子、checkpoint、state、window介绍flink的编程模型:DataStream、DataSet、Table API、SQL介绍flink的部署计算框架每个Java开发一定要懂至少一个流行的计算
spark技术学习与思考(sparkcore&sparksql)
Spark 产生之前,已经有 MapReduce 这类非常成熟的并行计算框架存在了,并提供了高层次的API(map/reduce),它在集群上进行计算并提供容错能力,从而实现分布式计算。所以为什么 spark 会流行呢?
消息队列:RabbitMQ
总结了消息中间件的特性、应用以及相关问题。详细介绍了如何使用RabbitMQ解决分布式相关问题。
学会RDD就学会了Spark,Spark数据结构RDD快速入门
学会RDD就学会了Spark,Spark数据结构RDD快速入门
用户画像基础之用户画像是什么
赵宏田 老师的 用户画像·方法论与工程化解决方案 一书读后笔记主要记录的是该书中 用户画像之基础 一章
大数据Java基础DAY11(抽象类,接口)
抽象类抽象类概述在Java中,一个没有方法体的方法应该定义为抽象方法,而类中如果有抽象方法,该类必须定义为抽象类。抽象类特点a.抽象类和抽象方法必须用abstract关键字修饰格式: abstract class 类名 {} public abstract void eat(); (抽象
Fluentd (tD-agent) 日志处理
1、td-agent是什么td-agent是一个日志采集器,提供了丰富的插件来适配不同的数据源、输出目的地等在使用上,我们可以把各种不同来源的信息,通过简单的配置,将日志收集到不同的地方,首先发送给Fluentd,接着Fluentd根据配置通过不同的插件把信息转发到不同的 地方,比如文件、SaaS
Linux编程第一篇:已经下载好镜像时Linux环境的安装(第二个方案)
Linux虚拟机安装
SpringBoot整合Dubbo2.7.8+zookeeper3.4.14(适合初学者)
1、SpringBoot
kafka学习笔记读取队列数据
kafka读取及存储消息队列
玩转 StarRocks on ES 全文检索
目录部署ES下载Config系统参数启动VerifySR 外表测试2:全文检索插件ESSR部署ES 下载 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.16.2-linux-x86_64.tar.g
3、Scala源文件的编写和运行及编译结果的反编译深入分析(单例设计模式)
Scala源文件的编写和运行及编译结果的反编译深入分析(单例设计模式)
RabbitMQ安装以及消息模型使用攻略
主要记录了RabbitMQ的安装以及2各种消息模型使用攻略
hive_实现ip的十进制和点分十进制(xxx.xxx.xxx.xxx)之间的相互转换
hive实现ip的十进制和点分十进制(xxx.xxx.xxx.xxx)之间相互转换
大数据之Redis单节点安装教程
Redis安装教程下载RedisRedis下载点击上方链接,即可进入Redis下载页面,这里我们选择安装最新版 Redis 6.2.6使用Xftp上传Redis压缩包在/usr/local目录下新建一个存放软件安装的目录moudlecd /usr/localmkdir moudle解压将Redis解
Flink Table/SQL自定义Sources和Sinks全解析(附代码)
动态表是Flink Table和SQL API处理有界和无界数据的核心概念。在Flink中,动态表只是逻辑概念,其本身并不存储数据,而是将表的具体数据存储在外部系统(比如说数据库、键值对存储系统、消息队列)或者文件中。动态源和动态写可以从外部系统读写数据。在下面的描述中,动态源和动态写可以归结为co
入职7天的开发,天天加班 12 点,张口闭口就是高并发,太让人崩溃......
在程序员职场上,什么样的人最让人反感呢?是技术不好的人吗?并不是。技术不好的同事,我们可以帮他。是技术太强的人吗?也不是。技术很强的同事,可遇不可求,向他学习还来不及呢。真正让人反感的,是技术平平,却急于表现自己的人,每天加班到 12 点,在老板面前表现得格外积极,弄得其他人都很尴尬。这就是行业当中
【架构师面试题库1】—etcd高可用集群搭建
环境准备操作系统:CentOS7搭建一个三节点的etcd集群机器名:etcd01 IP地址:192.168.154.133机器名:etcd03 IP地址:192.168.154.145机器名:etcd04 IP地址:192.168.154.146etcd包下载安装1、下载https://github
Java 开发 5 年从星瑞 15K 跳槽去腾讯 32K+16,啃完这份笔记你也可以
粉丝小王转行做 Java 已经是第五个年头,一直是一个不温不火的小职员,本本分分做着自己的事情,觉得自己的工作已经遇到了瓶颈,一个偶然的机会,获得了一份 Java 全栈知识点学习笔记,通过几个月的学习,5 面腾讯,成功斩获 Offer,今天就把这份 Java 全栈笔记展示出来,希望对各位猿友们的学习
【2022持续更新】大数据面试题整理-数据仓库篇
导语本专栏博文会整理日常工作与面试中最常用到的大数据相关组件与Java语言的架构、概念、知识点,方便大家进行查阅。涉及到的面试题以及答案均为博主搜罗整理,并加上自己的理解编写而成。同时博主会在部分题目的下方添加管遇此题深入理解的博文连接,方便读者的深入理解。希望大家可以通过此篇博文对于大数据相关概念