Hadoop简介
hadoop简介
微服务技术栈SpringCloud+RabbitMQ+Docker+Redis+搜索+分布式（五）：分布式搜索 ES-中
响应结果类：由搜索框得到的查询结果类。请求参数类：搜索框中有哪些参数。
Rabbitmq杂记
里面有个脚本直接 复制就可以其他不用看。
Hadoop平台搭建（一）
Hadoop平台的搭建需要一个主节点，多个副节点。在centos7中创建主机Master后，克隆主机为slave1与slave2，为保证从Hadoop平台的稳定选择完整克隆。克隆机slave1、slave2后的主机名依旧是Master，所以要修改主机名。由于slave1为Master的克隆机故uui
kafka 可视化工具
平时我们几乎都是查询topics 和 consumer 比较多，选择topics选项卡，右边就会显示kafka当前所拥有的topic，要查看某个 topic里面的消息，直接点击相应topic就能进到相应页面。删除topic，删除消费者组，查看消费者组，查询消息所属partition等等。随着科技发展
Kafka服务端高性能技术细节原理：基于零拷贝的mmap和sendfile
Kafka 的生产者将消息数据写入一个底层的 Socket 输出流中，并调用 sendfile 系统调用来将数据发送给消费者。由于 sendfile 可以直接将文件内容发送到网络输出流中，因此它避免了不必要的内存拷贝和数据复制，提高了数据传输效率。sendfile 是一个系统调用，它可以将文件内容直
Hadoop在ubuntu虚拟机上的伪分布式部署|保姆级教程
2.经后续测试发现问题，虽然已经为ubuntu系统设置了java的环境变量，但hadoop实际运行时仍会出现找不到java-jdk的现象，故再对hadoop的环境文件进行修改，此外，该文件还包括启动参数、日志、pid文件目录等信息。Hadoop和与之相关的很多工具都是通过java语言编写的，并且很多
Kafka之Producer网络传输
我们首先回想一下Producer消息发送的整体流程客户端线程会不断地写入数据，当前线程并不会阻塞，而是马上返回。这个时候消息被Producer放在了缓存内，消息并没有真正发送出去Producer内部为每个Partition维护了一个RecordBatch的队列，先进先出的模式，统称为RecordAc
RabbitMQ的安装和使用
通过上面简单的示例，我们在SpringBoot工程中引入spring-boot-starter-amqp模块，进行简单配置就完成了RabbitMQ的消息生产和消费的开发内容。下面我们通过在SpringBoot项目中集成RabbitMQ，并实现一个简单的发送、接收消息的例子来对RabbitMQ有一个只
kafka可视化工具搭建之kafdrop
Kafdrop 是一个用于查看 Kafka 主题和浏览消费者组的 Web UI。该工具显示代理、主题、分区、消费者等信息,并且可以预览topic消息。
零拷贝原理+kafka中的零拷贝
零拷贝原理+mmp优化零拷贝+sendfile优化零拷贝+kafka中的零拷贝
(Kafka源码三)Kafka的缓存机制
本文主要讲解了线程添加消息(append()方法源码)到RecordAccumulator的源码流程，以及在添加的过程中所涉及到内存的申请与释放的源码分析，最后介绍了RecordAccumulator通过CopyOnWriteMap实现的batches,从而实现了读写分离与高并发读的能力。下一章将从
RabbitMQ——解决分布式事务问题，RabbitMQ的重要作用之一！！！通过可靠生产和可靠消费来完美解决！
分布式事务是指涉及多个独立的计算机系统（也称为节点或参与者）之间的事务处理。在分布式系统中，每个节点可能各自拥有自己的数据存储和事务管理机制。分布式事务的目标是保证在跨多个节点执行的一系列操作可以以一致和可靠的方式执行和提交，即使在面对故障或并发操作时也能保持数据的完整性和一致性。实现分布式事务可以
Spark的易用性：易用性工具和实践
1.背景介绍1. 背景介绍Apache Spark是一个开源的大规模数据处理框架，它提供了易用性工具和实践，以便开发人员可以更轻松地处理大量数据。Spark的易用性是其吸引人的特点之一，因为它允许开发人员在短时间内构建和部署大规模数据处理应用程序。在本文中，我们将探讨Spark的易用性工具和实践，并
分布式 SpringCloudAlibaba、Feign与RabbitMQ实现MySQL到ES数据同步
MySQL 数据 如何同步到ES，重磅来袭，面试高频 ？ 一文彻底搞定！
【大数据】大数据概论与Hadoop
纯干货！十分钟，快速聊明白大数据概论和Hadoop。
RabbitMQ的常见工作模式
Topic类型与Direct相比，都是可以根据 RoutingKey 把消息路由到不同的队列。只不过 Topic 类型Exchange可以让队列在绑定 Routing key 的时候使用通配符！
分布式进阶（二二）——分布式框架之可扩展：Zookeeper
本章，我介绍了Zookeeper的数据模型和最典型的几种使用场景，并在作为注册中心时，对Zookeeper和Eureka进行了比较。
Python中的分布式运行：Selenium Grid
Selenium Grid 是 Selenium 测试框架的一个关键组件，它为测试人员提供了在多个计算机和浏览器上并行执行测试的能力。通过 Selenium Grid，我们能够更高效地进行大规模测试，并确保应用程序在不同环境中的稳定性和一致性。我们将从以下几点深入解析Selenium Grid分布式
什么是RabbitMQ的死信队列
当消息变成“死信”之后，如果配置了死信队列，它将被发送到死信交换机，死信交换机将死信投递到一个队列上，这个队列就是死信队列。3.消息被拒绝：当消费者明确拒绝一条消息时，它可以被标记为死信并发送到死信队列。如果消息在规定的时间内没有被消费，它可以被认为是死信并被发送到死信队列。1.消息处理失败：当消费
