【大数据处理技术】实验3

数据本2002 数据处理技术 实验3经验分享

Liunx虚拟机导入Vmware版

零基础虚拟机导入VMware Workstation Pro详细教程,包括可能会出现的错误。

大数据必学Java基础(六十一):同步类容器对比应用

【代码】大数据必学Java基础(六十一):同步类容器对比应用。

大数据ClickHouse进阶(六):Distributed引擎深入了解

Distributed引擎和Merge引擎类似,本身不存放数据,功能是在不同的server上把多张相同结构的物理表合并为一张逻辑表。注意:创建分布式表是读时检查的机制,也就是说对创建分布式表和本地表的顺序并没有强制要求。有了分布式表之后,我们就可以向分布式表中插入数据,那么分布式表会根据配置的sha

大数据必学Java基础(六十):集合补充

(ctrl + z:撤销,ctrl + y:恢复),用户的编辑操作被依次记录在一个栈中。一旦出现误操作,用户只需按下“撤销”按钮,即可取消最近一次操作并回到此前的编辑状态。这样,用户每访问一个新页面,其地址就会被存放至栈顶;而用户每按下一次“后退”按钮,即可沿相反的次序访问此前刚访问过的页面。真实结

《大厂高并发分布式锁从入门到实战》第4讲之Zookeeper分布式锁

首先我们先回顾一下zk的相关知识。zk作为分布式应用程序协调服务软件,是一个分布式的,开放源码的分布式应用程序协调服务,是Google的Chubby一个开源的实现,是hadoop和hbase的重要组件,它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等

猿创征文|ZooKeeper(伪)集群搭建

3、将Zookeeper解压 ,建立/usr/local/zookeeper-cluster目录,将解压后的Zookeeper复制到以下三个目录。我们会发现,2号服务器启动后依然是跟随者(从服务器),3号服务器依然是领导者(主服务器),没有撼动3号服务器的领导地位。由此得出结论,3个节点的集群,2个

大数据ClickHouse进阶(五):副本与分片

table_name”表示数据表的名称,通常与物理表的名字相同。以上我们创建的person_score表在ClickHouse集群节点node1、node2、node3上都是本地表,插入数据时插入到了对应节点的分片上,查询时也只能查询对应节点上的分片数据,如果我们想要通过一张表将各个ClickHou

【云原生 · Kubernetes】部署zookeeper

ZooKeeper是一种 为分布式应用所设计的高可用、高性能 且一致的 开源协调服务,它提供了一项基本服务:分布式锁服务。由于ZooKeeper的开源特性,后来的开发者在分布式锁的基础上,摸索了出了其他的使用方法:配置维护、组服务、分布式消息队列、分布式通知/协调等。在分布式协调技术方面做得比较好的

Flink - Kafka 下发消息过大异常分析与 Kafka Producer 源码浅析

Flink / Kafka 下发消息过大异常分析与 Kafka Producer 源码浅析。

RabbitMQ快速入门

为了保证除了自动生动的队列之外的其它队列能在所有节点上实现镜像,必须将 RabbitMQ策略配置项 ha-mode 设置为 all。单个节点服务器的故障不会导致消息的交换和绑定完全不可用,但是具体一个消息队列及其中的内容则相反。将多个 RabbitMQ 节点组织成一个集群,构建一个 RabbitMQ

【云原生】-Zabbix6监控MySQL最佳实践

zabbix可以用来监控MySQL数据库可用性和性能

Delta Lake 是什么?

Delta Lake 是一个开源项目,它可以运行在你现有的数据湖之上,可以在数据湖上构建湖仓一体架构,并且与 Apache Spark API 完全兼容。

Flink 中的时间和窗口(一)

在事件时间语义下,我们不依赖系统时间,而是基于数据自带的时间戳去定义了一个时钟, 用来表示当前时间的进展。于是每个并行子任务都会有一个自己的逻辑时钟,它的前进是靠数 据的时间戳来驱动的。但在分布式系统中,这种驱动方式又会有一些问题。因为数据本身在处理转换的过程中会 变化,如果遇到窗口聚合这样的操作,

【Golang开发面经】字节跳动(三轮技术面)

整体面试下来,感觉其实字节对于语言本身并没有很多的涉及,更加注重基础,比如数据结构与算法,计算机网络,组成原理,操作系统,数据库等等,语言本身并没有涉及太多。这里就省去了一些我简历上的问题,也就是深挖项目。

ES 搜索引擎

Es搜索引擎使用

Kafka集群部署与测试

Kafka集群部署与测试安装Kafka①、Alt+P 拷贝安装包 cd /opt/moduletar -zxvf /opt/software/kafka_2.11-2.0.0.tgz -C /opt/module/②、修改配置文件vi /opt/module/kafka_2.11-2.0.0/co

【Mysql】上号(连接数据库)操作一把——增删改查

此为本人学习查阅使用,仅供参考。

示例:【新学期、新Flag】与CSDN的故事

大家好,我是猿童学🐵哦,大数据专业在读大三,在CSDN的🐎龄已经8岁了,相信大家会很好奇,为什么会是8年,难道是大佬?不不不,NO!大家不要误会,我也希望是,但俺啥也不是呀。

Hadoop内hive之间,hive与DB、ES等之间数据交互的问题与解决方案

之前做大数据处理,经常遇到各种问题。很多时候是项目作业简单项配置问题,也可能是导入导出参数配置的问题,也可能是公司Hadoop平台的问题。那么如何排查问题,解决问题?这种事情,除了自己要积累一些大数据的知识和技能外,也需要一些获得一些排查问题的技巧、方法。

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈