kafka安全机制(SASL_SCRAM)
zookeeper和kafka在默认情况下,是没有开启安全认证的,那么任意客户端可以在不需要任何身份认证的情况下访问zookeeper和kafka下的各节点,甚至可以进行节点的增加,修改以及删除的动作。除了最基本的身份认证以外,还有针对每个节点的权限访问,但本文不涉及该话题。如果是集群模式,那么只需
每天十分钟学会Spark
小白学大数据Spark编程第2课
一文读懂运维消息中间件之RabbitMQ
一文读懂运维消息中间件之RabbitMQ,适合小白学习及上班族日常工作参考。
educoder中Hive综合应用案例 — 用户搜索日志分析
Hive综合应用案例 — 用户搜索日志分析
上海天翼云代理商:分布式消息服务Kafka高吞吐、高可用的消息中间件服务
Kafka是一个分布式发布-订阅消息系统,它最初由LinkedIn公司开发,后来成为Apache项目的一部分。Kafka分布式特性强,可以处理TB级数据,支持和许多主流语言进行交互,包括JAVA,Python等。由于Kafka的这些显著优点,它在大数据处理、实时计算以及日志收集等领域都表现出色。开创
Kafka入门到实战-第五弹
Apache Kafka 是一个开源的分布式事件流平台,提供高性能数据管道、流分析、 数据集成和任务关键型应用程序。
【Hadoop】伪分布式安装
还不懂Hadoop伪分布式安装?一文带你从0开始搭建大数据代表作Hadoop环境!
Flink本地Debug调试的方法和注意点
flink项目如何本地debug调试,毕竟和后端项目不同。本文介绍flink项目本地debug方法和注意点。
头歌大数据技术第二关 大数据从入门到实战 - 第2章 分布式文件系统HDFS
System.out.println("总进度"+ (fileCount / fileSize) * 100 + "%");//文件地址为 "hdfs://localhost:9000/user/hadoop/task.txt"//请在Begin-End之间添加你的代码,完成任务要求。//请在 Be
Apache Hive的基本使用语法(一)
Apache Hive的基本使用语法
zookeeper快速入门四:在java客户端中操作zookeeper
系列文章:zookeeper快速入门一:zookeeper安装与启动-CSDN博客zookeeper快速入门二:zookeeper基本概念-CSDN博客zookeeper快速入门三:zookeeper的基本操作先启动zookeeper服务端。在maven引入zookeeper依赖。<depen
RabbitMQ--03--SpringAMQP(SpringBoot集成RabbitMQ)
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档。
VMware中Linux系统下(Ubuntu)Hadoop的安装和使用步骤
VMware中Linux系统下(Ubuntu)Hadoop的安装和使用步骤此篇文章中安装的是:jdk1.8.0_202、hadoop-3.2.4。
【大数据】Flink学习笔记
Flink学习笔记
RabbitMq高可用
如何确保RabbitMQ消息的可靠性?开启生产者确认机制,确保生产者的消息能到达队列开启持久化功能,确保消息未消费前在队列中不会丢失开启消费者确认机制为auto,由spring确认消息处理成功后完成ack开启消费者失败重试机制,并设置MessageRecoverer,多次重试失败后将消息投递到异常交
大数据毕设分享(含算法) 基于hadoop大数据教育可视化系统(源码+论文)
大数据可视化是关于数据视觉表现形式的科学技术研究[9],将数据转换为图形或图像在屏幕上显示出来,并进行各种交互处理的理论、方法和技术。将数据直观地展现出来,以帮助人们理解数据,同时找出包含在海量数据中的规律或者信息,更多的为态势监控和综合决策服务。数据可视化是大数据生态链的最后一公里,也是用户最直接
rabbitmq的confirm模式获取correlationData为null解决办法
在convertAndSend方法中传入correlationData数据。
大数据开发(Hadoop面试真题)
HDFS是Hadoop分布式文件系统(Hadoop Distributed File System)的简称。它是一个可扩展的分布式文件系统,设计用于存储和处理大规模数据集的应用程序。高容错性:HDFS将文件划分为多个块,并在多个节点上进行复制存储,以实现数据的冗余备份。当某个节点或块发生故障时,HD
值得收藏!2024年人工智能顶级会议投稿信息汇总(大数据领域)
本文对大数据领域内的顶级会议进行了介绍,以便读者了解会议主题、截稿日期、录用通知时间、举办时间及地点等关键信息。同时还将相关会议信息汇总成一张表格,方便读者快速的查看大数据领域内的相关论文。
Flink实践代码-TableAPI 与 DataStream 互转
Flink tableAPI2DataStream