第9篇：ElasticSearch分布式搜索6大能力
Elasticsearch最大的优势在于其检索能力。那为了适配日常不同业务的多种查询需求，Elasticsearch为我们提供了六大搜索方式: 轻量搜索、表达式搜索、复杂搜索、全文搜索、短语搜索和高亮搜索。
SpringBoot整合RabbitMQ--死信队列/延迟队列--用法/实例
本文用示例介绍SpringBoot整合RabbitMQ时如何处理死信队列/延迟队列。
第2期：大数据岗位有哪些
目前大数据是一个非常有发展前景的岗位，在IT界薪资待遇也很高，很多人想从事这方面的工作，那下面我们谈谈大数据可以应用到哪些领域，需要哪些技术、都有哪些岗位。
同步存量数据
同步存量数据把数据源端的数据通过Kettle读取，然后通过消息队列中间件（Kafka）导出软件准备Kettle：pdi-ce-9.3.0.0-428kettle简介Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。
一.Kafka入门到精通-Kafka快速入门
前言在内卷严重的程序员圈子中，原地踏步就是退步，所以不能再躺平啦，赶紧爬起来学习，接下来博主将推出《Kafka入门到精通》系列文章，让你可以在企业中玩起Kafka来得心应手，此乃升职加薪必备呀。Kafka认识Kafka 是由Linkedin公司开发的，支持多分区、多副本，基于 Zookeeper 的
zookeeper使用详解
zookeeper
SpringBoot整合RabbitMQ--消息确认--方法/实例
本文介绍SpringBoot整合RabbitMQ如何进行消息的确认。
第三章 注册中心-Zookeeper
一、注册中心概述对于服务提供方，它需要发布服务，而且由于应用系统的复杂性，服务的数量、类型也不断膨胀；对于服务消费方，它最关心如何获取到它所需要的服务，而面对复杂的应用系统，需要管理大量的服务调用。而且，对于服务提供方和服务消费方来说，他们还有可能兼具这两种角色，即需要提供服务，有需要消费服务。 通
RabbitMq概述与工作模式(1)
一，Mq概念1.1 Mq概述Mq全称 Message Queue，是在消息传输过程中保存消息的容器，多用于分布式系统之间的通信1.2 Mq优势1，应用解耦如下图，假设a和bcde系统都要实现交互，在不使用mq的情况下，那么就会增加系统之间的耦合性，并且增加系统之间的开销，在使用mq的情况下，a只需将
ZooKeeper的配置选项的安装步骤
（一）下载和安装zooKeeper（1）在起始的/opt 目录下建立software文件和module文件，software文件用来下载安装包，下载后的安装包·可以·解压到module文件。可以用下面这一行代码：tar zxvf /opt/software/zookeeper-3.4.8.tar.g
Maxwell 一款简单易上手的实时抓取Mysql数据的软件
Maxwell 是用 Java 编写的 MySQL 实时抓取软件。实时读取MySQL 二进制日志 Binlog，并生成 JSON 格式的消息，作为生产者发送给 Kafka，Kinesis、RabbitMQ、Redis、Google Cloud Pub/Sub、文件或其它平台的应用程序。
Kafka中的LEO和HW
通过画图轻松理解kafka中的LEO和HW的概念与作用
QT自定义QTextEdit实现大数据的实时刷新显示
本文自定义QTextEdit实现实时加载大数据，不会卡顿的效果。
flink的standalone模式环境搭建
一.standalone模式所有的资源都由flink自己管理flink的jar包：flink-1.11.2-bin-scala_2.11.tgz把安装包放到linux中bin #服务或命令conf #配置文件examples #实例，案例lib #jar包log #日志1.解压缩tar -xz
Hive--时间函数大全
hive时间函数1. current_date()：获取当前格式化日期2. current_timestamp()：获取当前格式化时间3. unix_timestamp()：获取当前unix时间戳4. from_unixtime()：把unix时间戳转化为格式化时间5. to_date(): 当前格
filebeat+elasticsearch管道提取message字段
1：个人使用背景：filebeat采集日志写入es的时候，日志内容在message字段中，因为其中添加了tid字段，要提取出projectname,date,tid等这些字段，采用管道对数据进行预处理，格式化数据，重新构建了索引，最后查询，排序，条件查询什么的都直接操作字段就可以了。 ps：原
数据湖概念（一）
数据湖概念一、什么是数据湖数据湖是一个集中式的存储库，允许你以任意规模存储多个来源、所有结构化和非结构化数据，可以按照原样存储数据，无需对数据进行结构化处理，并运行不同类型的分析对数据进行加工，例如：大数据处理、实时分析、机器学习，以指导做出更好地决策。二、大数据为什么需要数据湖当前基
我与Java Boy的10年-从小白到资深架构
大家好，我是你们的新朋友老王随聊。正值Java的27岁生日之际，今年也恰好是老王与Java相识的第10个年头了, 而这10年老王从自己的亲身经历我见证了Java技术的快速发展。关于我与Java的故事，老王想从Java技术学习的三个阶段聊聊这10年来，我是如何从一个编程小白成长为一名资深架构师，我相信
数据仓库搭建ODS层
其他内容请关注我的博客！在<项目>专栏里！！！目录一、用户行为数据1.1创建日志表1.2ODS层加载数据脚本二、业务数据2.1hive建表2.2ODS层加载数据脚本一、用户行为数据1.1创建日志表1）创建支持lzo压缩的分区表drop table if exists ods_log;CR
夏季瑟瑟发抖的前端又赶上一波裁员潮，其实前端才是宝
饥寒交迫的前端在互联网下行压迫下还能不能雄起，自欺欺人的产品优先战略下前端投入了多少？前端优化有哪些方法和小技巧？
