Elasticsearch:在 Java 客户端中使用 truststore 来创建 HTTPS 连接

在我之前的文章 “” 里,我使用了两种方法,一直是使用 token 的方式,另外一种是使用 PEM 证书来进行连接的。在实际的使用中,有时我们的证书是以 PCKS12 格式的 truststore 格式的,那么我们该如何建立这种 HTTPS 的连接呢?如果你还没有安装好自己的 Elasticsear

国家实用新型发明专利:一种机器视觉的流水线智能检测报警系统

本实用新型公开了一种基于机器视觉的流水线智能检测报警系统,包括:视觉处理模块、电源模块、无线通讯模块、核心控制模块和客户端;该核心控制模块分别与视觉处理模块、电源模块、无线通讯模块相连,用于将视觉处理模块处理后的报警信息通过无线通讯模块发送给客户端,并接收客户端发送给服务器的前端配置信息。本实用新型

字节跳动基于ClickHouse优化实践之“多表关联查询”

更多技术交流、求职机会、试用福利,欢迎关注相信大家都对大名鼎鼎的ClickHouse有一定的了解了,它强大的数据分析性能让人印象深刻。但在字节大量生产使用中,发现了ClickHouse依然存在了一定的限制。例如:缺少完整的upsert和delete操作多表关联查询能力弱集群规模较大时可用性下降(对字

配置Sqoop1.4.7支持Hadoop3

解决Hadoop3无法使用Sqoop的问题

ElasticSearch 分词器

ElasticSearch 分词器

Hive调优策略之SQL优化

介绍了hive如何从sql层面进行调优

Docker安装Hadoop

docker exec -it hadoop bash进入容器。查找hadoop-env.sh的安装路径。配置备份数量,小于等于slave数量。三个容器都要修改如下三个IP映射。

hive的开窗函数篇

hive的开窗函数over()

浅谈Hive SQL的优化

目前团队的数据处理都在Hadoop集群上,一是因为需要处理的数据量都是亿级的,这种规模的数据适合用Hadoop集群并行处理;二是免除了分库分表给查询处理上带来的麻烦。Hive是基于Hadoop的一个数据仓库工具,它将存储在HDFS上的结构化的文件映射成一张关系型数据库表,提供简单的SQL查询功能。本

虚拟机 安装jdk及hadoop单机版

在虚拟机上进行jdk及hadoop单机版安装,对如何配置虚拟机上的环境变量做了详细的描述,以及hadoop安装出现错误如何查找

二、RabbitMQ的五种工作模式

1.简单(Simple)模式P:生产者,也就是要发送消息的程序。C:消费者:消息的接收者,会一直等待消息到来。queue:消息队列,图中红色部分。类似一个邮箱,可以缓存消息;生产者向其中投递消息,消费者从其中取出消息。简单模式就是单发单收,消息的消费者监听消息队列,如果队列中有消息,就消费掉,消息被

HBase的数据模型和存储原理

类似于关系型数据库的 DatabBase 概念,每个命名空间下有多个表。HBase有两个自带的命名空间,分别是 hbase 和 default,hbase 中存放的是 HBase 内置的表,default 表是用户默认使用的命名空间。类似于一个表的子表,表中的一部分。HBase中的一个表被拆分成多个

数仓工具—Hive实战之GenericUDF使用详解(24)

GenericUDF 使用起来相比UDF 更复杂,但是我们也介绍了它支持复杂数据结构,性能更高,需要注意的是GenericUDF是抽象类不是接口,关于GenericUDF的使用的复杂案例可以参考我们的UDAF批量调用外部请求。

springboot集成kafka,@KafkaListener重复消费问题

springboot集成kafka,@KafkaListener重复消费问题

Flink-输出算子(Sink)使用

flink输出到kafka,elasticsearch,redis

rabbitMq实现延迟队列

业务场景:1.生成订单30分钟未支付,则自动取消,我们该怎么实现呢?2.生成订单60秒后,给用户发短信1 安装rabbitMqwindows安装ubuntu中安装2 添加maven依赖 <!-- https://mvnrepository.com/artifact/org.springf

Flink JobManager内存管理机制介绍与调优总结

作者:董伟柯,腾讯云大数据高级工程师概要我们知道,旧版本 Flink 的 JobManager 作为管理者,只承担着初始化和协调的任务,内存压力非常小,很少出现 OOM 等问题。但是,随着 Flink CDC [1] 实时数据捕获技术的广泛应用,以及采用 Flink 新版 Source 接口(FLI

flink程序在消费kafka数据时出现Error sending fetch request问题

在程序已经稳定运行多天、未对代码做任何修改、查看所消费数据源未出现数据增多的情况下,有一个flink程序最近出现了积压问题,很是疑惑,观察几天并查看了日志发现,每当出现加压时便会伴随该日志出现,因此便着手解决该问题。...

国产各数据库厂商数据库梳理

中国电子云飞晶分布式数据库管理系统(CrystalBase)北京子午星辰数据技术有限公司()CovenantLabs)基于ClickHouse研发的一款分析型数据库产品。开源的兼容ORACLE的PostgreSQL数据库。海盒数据库,提供了列存储引擎与向量计算引擎。基于量子密钥分发协议的分布式关系型

大数据下的高级算法:hyperloglog,统计海量数据下不同元素的个数

redis中hyperloglog算法和数据结构的原理

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈