zookeeper节点类型,整合代码实现服务器动态监听
zookeeper集群、整合代码、监听节点
zk分布式实现理论,Paxos算法,ZAB协议,CAP定理
zk分布式实现理论,Paxos算法,ZAB协议,CAP定理
【算法岗面试】某小厂E机器学习
文章目录1.deepFM的FM特点,deep部分设置了多少层,依据2.算法题:爬楼梯3.算法题:最大子数组和4.sql题:商品id、类别、价格,mysql找出找出每类前10大的商品5.1000个学生成绩排序,比快排更快的方法6.常用的数据预处理有哪些操作7.transformer的文本抽取8.反欺诈
基于docker搭建ElasticSearch和Kibana环境
es学习笔记Day1:基于docker搭建es和kibana环境
大数据-Hadoop是什么,如何部署
大数据-Hadoop是什么,如何部署1.是什么?2.架构2.1 HDFS(分布式文件系统)2.1.1NameNode(简称nn)2.1.2DataNode(dn)2.1.3Secondary NameNode(2NN)2.2 YARN(资源管理器/协调者)2.2.1 Resource Manager
Dubbo快速入门
Dubbo一、基础知识1.1 分布式系统定义1.2 应用架构的演变1.2.1 单一应用架构1.2.2 垂直应用架构1.2.3 分布式应用架构1.2.4 流动计算架构1.3 RPC1.3.1 什么是RPC?1.3.2 实例1.4 dubbo简介1.5 Dubbot设计架构1.5.1 调用关系说明1.6
【TiDB】快速起步
学习 TiDB 由来、发展与演进,理解 TiDB 5.0 数据库的体系架构、技术创新、关键特性、应用案例与适用场景。
企业采购管理系统SRM
企业采购管理系统
2022字节跳动数据仓库实习面经
先和大家说一下情况,3月4号面试的字节跳动数据研发岗位直接把我挂了,我满脸疑惑,但是抱着学习和提升自我的心态,打电话问问hr,像看看面试官给我面试的评价,hr说,就两行,第一句肯定,第二句说我专业知识不够。以下是我上次的面试经历👇:链接: 2022暑期实习字节跳动数据研发面试经历.链接: 2022
忙碌的一个月
自2月9日至今,我已经在新的环境里学习和工作满了一个月了。我想记录下这个月里的所见所闻和自己的一些心得感受,算作是月度总结吧!虽然有三个月的学习培养或成长其,但第一个月的总体的感受就一个词:忙碌。那到底忙碌些什么呢?具体有如下几个方面:一方面是适应新环境,学习新环境各种办公所需软硬件。所谓软件,不仅
使用canal解决Mysql和ElasticSearch数据同步问题
前言在上一章《Canal实现Mysql和Redis数据同步》我们使用Canal对Mysql和Redis进行数据同步,这一章我们学习使用Canal对Mysql和ElasticSearch进行数据同步工作原理分析我不知道你是否了解Mysql主从,根据2/8原则,80%的性能问题都在读上面,当我们数据库的
【Kafka从入门到成神系列 三】Kafka 生产者消息分区及压缩算法
作者简介:大家好,我是爱敲代码的小黄,独角兽企业的Java开发工程师,Java领域新星创作者。个人公众号:爱敲代码的小黄。系列专栏:Java设计模式、数据结构和算法、Kafka从入门到成神。如果文章知识点有错误的地方,请指正!和大家一起学习,一起进步。如果感觉博主的文章还不错的话,请三连支持一下博主
Hadoop 集群安装
Hadoop 集群安装
over 与lateral view 的hive、spark sql执行计划
建表语句create table test_over ( user_id string, login_date string)COMMENT '测试函数使用,可以删除' row format delimited fields terminated by '\t';over 执行计划
Kafka集群搭建(使用自带zookeeper,多节点)
1-Kafka集群搭建1.安装包解压至相应目录/home/ZX/soft/kafka_2.12-3.0.02.搭建三个节点IP broker.id myid10.103.105.91 1
Hadoop三大组件之MapReduce
从前我们还有着无拘无束的梦想,后来发现,那只是梦,不努力怎敢想。
客快物流大数据项目(六十一):将消费的kafka数据同步到Kudu中
目录将消费的kafka数据同步到Kudu中一、导入表名映射关系类二、编写数据解析器根据表名解析成具体的POJO对象三、扩展自定义POJO的隐式转换实现四、转换Ogg和Canal对应主题的数据为具体的POJO对象五、实现Kudu表的自动创建工具类六、将数据写入
ElasticSearch安装及使用
什么是Elasticsearch Elasticsearch是一个实时的分布式存储、搜索、分析的引擎。为什么要用Elasticsearch在学习一项技术之前,必须先要了解为什么要使用这项技术。所以,为什么要使用Elasticsearch呢?我们在日常开发中,数据库也能做到(实时、存储、搜索、分析)。
ZooKeeper客户端源码(一)——向服务端建立连接+会话建立+心跳保持长连接
ZooKeeper客户端如何向服务端建立连接?如果连接断了如何重试?会话建立的流程是怎样的?如何保持长连接?心跳?
大数据主要应用领域
一、大数据产业中国大数据产业 2018年,对于中国大数据产业而言,是一个具有重要标志的年份。大数据产业园大数据产业的聚集区 产业化项目的孵化区二、大数据的主要应用农业大数据 工业互联网 服务业应用(一)农业大数据(1)大数据理论和技术在农业上的应用和实践,是指运用大数据理念、技术和方法,解决农业或涉