微服务组件之Eureka
Eureka是Netflix开发的服务发现的框架，本身是一个基于REST的服务，主要用于定位运行在AWS域中的中间层服务，以达到负载均衡和中间层服务故障转移的目的。而在我们尝试用的过程中，主要是用这个组件实现服务调用、负载均衡、容错等，实现服务发现与注册。（服务端，注册中心）和（客户端），在中又分为
一文看尽：各大数据公司和 AI 结合进展
自主研发的云原生湖仓一体数据智能平台 KeenData Lakehouse，采用国际领先的湖仓一体架构重复分融合了数据湖和数据仓库各自的优势，实现一套数据、一套任务在湖和仓之上无缝调度和管理，面对不同行业的 AI 大模型 KeenData Lakehouse 提供数据集成、数据标注、数据算法、数据分
k8s搭建hadoop
通过本文介绍，您学习了如何使用Kubernetes搭建Hadoop集群，实现了大数据处理的分布式部署。这种部署方式可以更好地利用资源，实现高可用性和扩展性。希望本文对您有所帮助，祝您在大数据领域取得成功！
2024年电子商务与大数据经济国际会议 (EBDE 2024)
2024年电子商务与大数据经济国际会议即将在厦门召开。本次会议旨在汇聚全球电子商务与大数据经济领域的专家学者，共同探讨电子商务与大数据经济的创新与发展趋势。会议将围绕电子商务的新模式、大数据经济的应用与挑战以及两者之间的融合与创新等议题展开深入研讨。参会者将有机会分享最新的研究成果和实践经验，交流行
如何学习MySQL：糙快猛的大数据之路（万字长文，建议收藏）
"糙快猛"学习法源于一个简单而深刻的道理:学习就应该糙快猛,不要一下子追求完美,在不完美的状态下前行才是最高效的姿势。快速入门,不拘小节持续实践,边学边用勇于尝试,不怕犯错这种学习方法特别适合在当今快速变化的技术环境中学习新技能,比如MySQL。在这个技术日新月异的时代，MySQL和整个数据库领域都
Flink调优详解：案例解析（第42天）
本文主要详解常见的Flink优化策略。
摸鱼大数据——Kafka——Kafka的shell命令使用
Kafka本质上就是一个消息队列的中间件的产品，主要负责消息数据的传递。也就说学习Kafka 也就是学习如何使用Kafka生产数据，以及如何使用Kafka来消费数据。
基于大数据视域下网络招聘信息的挖掘与分析
基于大数据视域下网络招聘信息的挖掘与分析作者：禅与计算机程序设计艺术1. 背景介绍1.1 大数据时代的来临随着互联网技术的飞速发展,我们已经步入了大数据时代。海量的数据每时每刻都在被生成和收集,蕴含着巨大的价
大数据-Hadoop-基础篇-第十章-Spark
Spark是一种通用的大数据计算框架,是基于RDD(弹性分布式数据集)的一种计算模型。那到底是什么呢？可能很多人还不是太理解，通俗讲就是可以分布式处理大量集数据的，将大量集数据先拆分，分别进行计算，然后再将计算后的结果进行合并。SparkSQL。
如何学习Hadoop：糙快猛的大数据之路（利用GPT 学习）
请记住，技术工具在不断evolve，"糙快猛"的学习方法可以让你快速掌握新技术的要领。每当你解决了一个难题，克服了一个障碍，你就离你的目标更近了一步。保持热情，保持好奇，继续前进！保持"糙快猛"的学习态度，快速掌握新技术通过实战项目深化对技术的理解。
超级底层：10WQPS/PB级海量存储HBase/RocksDB，底层LSM结构是什么？
全称 Log-Structured Merge-Tree 日志结构合并树，但不是树,它是利用了磁盘顺序读写能力，实现了一个多层的存储结构1996年，一篇名为 Thelog-structured merge-tree（LSM-tree）的论文创造性地提出了日志结构合并树（ Log-Structured
6.Kafka Acks详解
本文对 `kafka` 的一些核心概念进行解释，也是 `kafka` 需要调优的一些地方。
Mac M1安装配置Hadoop+Flink SQL环境
Flink 1.18.1+ Hadoop 3.4.0
【Spark生态】--Spark环境搭建
Spark环境安装部署，Local模式和PySpark库的安装
RabbitMQ-最常用的消息队列MQ安装详解！！
RabbitMQ-最常用的消息队列MQ安装详解！！RabbitMQ是一个开源的消息代理软件，它实现了高级消息队列协议(AMQP)，为分布式系统提供了一种高效、可靠的消息传递机制。RabbitMQ最初起源于金融系统，用于在分布式系统中存储和转发消息，现在已经成为一个广泛使用的开源消息中间件。
Hadoop发展史和生态圈介绍
Hadoop是由Apache基金会所开发的分布式系统基础架构，旨在解决海量数据存储和计算分析问题。Hadoop HDFS(Hadoop Distributed File System):分布式文件存储系统，解决海量数据存储问题。Hadoop Yarn:集群资源管理和任务调度框架，解决资源任务调度问题
大数据学习之Spark基础
后一个RDD中的分区数据，除KV函数以外，对应的是前一个RDD中的分区数据所进行逻辑处理后的结果。当重复触发相同的执行的时候，对于同一个DAG有向无环图而言，会直接从shuffle之后的RDD开始执行（省略从前一个RDD写数据到磁盘中的过程），可以直接从磁盘读取数据。1）窄依赖 前一个RDD中的某一
Spark Delta Lake
【代码】Spark Delta Lake。
