Doris安装部署
doris部署
Spring Boot整合RabbitMQ之发布与订阅模式(fanout)
Spring Boot整合RabbitMQ之发布与订阅模式
Flink sql join 快速入门
flink sql join 、Regular Joins(双流join)、Interval Joins(区间join)、Temporal Joins(时态join)、JOIN LATERAL、窗口Join
Hadoop 50070端口打不开怎么办?
若已部署成功,请进行第二步排查!Hadoop50070是hdfs的web管理页面,在搭建Hadoop集群环境时,有些大数据开发技术人员会遇到Hadoop 50070端口打不开的情况,引起该问题的原因很多,想要解决这个问题需要从以下方面进行排查!以上是Hadoop 50070端口打不开的正常排查顺序和
Kafka生产者的一个Bug会导致部分消息一直无法发送
Node-0 准备开始遍历它下面的几个队列中的ProducerBatch,遍历一次 则drainIndex+1,发现遍历了一个队列之后,就装满了这一批次的请求。因为发送一次的请求量是有限的(max.request.size), 所以一次可能只能发几个ProducerBatch. 那么这次发送了之后,
Android系统10 RK3399 init进程启动(三十) Selinux编译方法
本章节重点介绍在Android源码中如何编译selinux模块, 以及如何查看编译日志
几种python存储数据(海量数据)的方式及读取时间对比
使用背景:需要保存通过包括但不限于torch及numpy创建的数据(在这里主要测试的是通过网络训练,提取到的图片的特征向量)数据格式及大小:在这里使用torch创建数据,没用使用GPU(已经是该配置下能运行的最大数据量了,否则会爆内存)运行环境:具体参数参考R9000P 2021 3070版本;数据
手把手教你使用Springboot整合dubbo,搭建一个微服务
由于dubbo的注册中心用的是zookeeper,所以首先需要。
Kafka发送消费消息
3.发送消息把消息发送给broker中的某个topic我们可以直接在命令行中输入内容,将消息发送到Kafka中,每一行会被当做一个独立的消息;使用kafka的发送消息客户端——>发送到指定的kafka服务器地址和topic主题就是日志文件下:主题-标识id分区下的0000.log上面也讲了消息的发送
从0到1介绍一下开源大数据比对平台dataCompare
在大数据领域也已经工作了多年,无论所待过的大公司还是小公司,都会遇到集群升级迁移过程中据搬迁等相关工作,经常会碰到搬迁之后,搬迁的数据是不是能对的上呢?两边数据究竟是不是一致的呢?如果不一致,那又有哪些差异呢?能不能更快地找到差异解决问题呢?
大数据简历要点与模拟面试和项目介绍模板一
1)项目查找查找项目:易观千帆指数 http://zhishu.analysys.cn/应用市场:应用宝、应用汇、豌豆荚、华为、魅族、小米 可选行业:电商、教育、医疗、旅游、电影、小说、新闻 不是很推荐的行业: (工业互联网 物联网) 传统行业工资较低,发展前途也不是很好
DataX和Oracle使用案例
DataX和Oracle使用案例
大数据-数据底座架构/数据中台建设
在信息化向数字化转型的过程中,企业积累了海量的数据,并且还在爆发式的增长。数据很多,但是真正能产生价值的数据却很少。数据普遍存在分散,不拉通对齐等问题,缺乏统一的定义及架构,找到想要的,能用的数据越来越难。如何实现数据的汇聚和联接,打破数据孤岛与垄断,就显得格外重要。...............
logstash读取kafka所有topics 自动创建es 索引
logstash读取kafka的topics,根据内容提取指定字段然后自动创建es索引
通过java代码的方式提交任务远程到flink集群
flink远程提交任务
hive复杂类型数据详解—array,map,struct
hive复杂数据类型有三种,map,array,struct。本文会详细介绍三种类型数据的建表、查询、相关函数以及与其他数据类型的相互转换。目录一、简介二、建表语句三、类型构建四、查询array类型map类型struct类型五、与其他数据类型转换将array和map转化为基本数据类型(行转列)基本数
Rabbitmq WebSocket 自动断开问题的解决方案
关于报错,Whoops! Lost connection to ws://XXX.XXX.XXX.XXX:15684/ws在玩rabbitMQ时候,用stompJS从web连接ranbbitMQ时,报了标题的错误消息!
Flink系列Table API和SQL之:创建表环境和创建表
Flink系列Table API和SQL之:创建表环境和创建表
阿里云短信服务
阿里云短信服务,包括一些坑和技巧
vue3.0——数据仓库Pinia介绍、使用pinia、修改状态、订阅修改、getter、action、模块化
Pinia的介绍、使用pinia、修改状态、订阅修改、getter、action、模块化