大数据平台CDH搭建

Cloudera Manager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具。2、环境准备2.1、虚拟机准备克隆三台虚拟机(hadoop102、hadoop103、hadoop104),配置好对应主机的网络IP、主机名称、关闭防火墙。2.2、SSH免密登录配置hadoop102

大数据从入门到实战-HDFS-JAVA接口之删除文件

HDFS-JAVA接口之删除文件

大数据学完好就业么

Python的普及与数据挖掘、人工智能和数值计算等领域的蓬勃发展相关,但同时也与普遍编程需求的增加有关。Python应用领域广泛,意味着选择Python的同学在学成之后可选择的就业领域有很多,加上Python本身的优势,致使现在越来越多的新人开始学习这一编程语言。Python语言简单易懂,适合零基础

docker启动rabbitmq及使用

搜索rabbitmq镜像docker search rabbitmq:management下载镜像docker pull rabbitmq:management启动容器docker run -d --hostname localhost --name rabbitmq -p 15672:15672

Python毕业设计 大数据电商用户行为分析与可视化

🔥 这两年开始毕业设计和毕业答辩的要求和难度不断提升,传统的毕设题目缺少创新和亮点,往往达不到毕业答辩的要求,这两年不断有学弟学妹告诉学长自己做的项目系统达不到老师的要求。为了大家能够顺利以及最少的精力通过毕设,学长分享优质毕业设计项目,今天要分享的是🚩基于大数据的淘宝用户行为分析🥇学长这里给

idea 插件 Easy Code 自定义 MybatisPlus 模板一键快速生成所需代码

​idea 中的 Easy Code 插件,说是能快速生成 entity 、mapper、service、controller 等文件,避免很多简单重复性的创建工作,大大提高 MySQL 增删改查的开发效率。

自学大数据第14天NoSQL~MongoDB及其命令

如果要确保在创建集合时MongoDB不会创建_id字段,并且要指定自己的ID作为集合的_id,则需要在创建集合时明确定义它。在显式创建id字段时,需要使用名称中的_id创建它。

RabbitMQ详解

说到消息中间件,估计大伙多多少少都能讲出来一些,ActiveMQ、RabbitMQ、RocketMQ、Kafka 等等各种以及 JMS、AMQP 等各种协议,然而这些消息中间件各自都有什么特点,我们在开发中又该选择哪种呢?

SpringCloud 微服务系列——【基础与服务注册中心详解】

1、什么是微服务2、为什么是微服务3、微服务的解决方案3.1、Dubbo (阿里系)3.2、Spring Cloud4、什么是 SpringCloud核心架构及其组件5、环境搭建5.1、版本命名5.2、版本选择5.3、环境搭建6、服务注册中心6.1、Eureka注册中心开发Eureka Server

让代码变得优雅简洁的神器:Java8 Stream流式编程

​ 流(Stream)是对数据进行连续处理的抽象概念,可以看作数一种迭代器,按步骤处理数据元素。流的创建方式包括从集合、数组、文件等数据源获取输入流或者输出流,或者通过网络连接获取到网络流,例如Kafka 的流处理。常见的使用场景包括从大型数据源读取、过滤、数据转换、聚合等操作。​ 并行流是指通过将

【大数据】HADOOP-YARN容量调度器配置详解

HADOOP-YARN Capacity-scheduler 层次化的队列设计,这种层次化的队列设计保证了子队列可以使用父队列设置的全部资源。这样通过层次化的管理,更容易合理分配和限制资源的使用。容量保证,队列上都会设置一个资源的占比,这样可以保证每个队列都不会占用整个集群的资源。安全,每个队列有严

基于ASP的反垃圾邮件管理系统的设计与实现

电子邮件表示通过电子通讯系统进行信件的书写、发送和接收。今天使用的最多的通讯系统是互联网,同时电子邮件也是互联网上最受欢迎的功能之一。通过电子邮件系统,您可以用非常低廉的价格,以非常快速的方式(几秒钟之内可以发送到世界上任何你指定的目的地),与世界上任何一个角落的网络用户联络。同时,您可以得到大量免

K8S管理命令(一)

k8s命令管理

ChatGPT的影响力和未来发展

值得注意的是,ChatGPT和其他语言模型一样,只是一种技术工具,它的应用和使用需要遵守相应的道德和法律规范,确保不会损害用户权益和社会公共利益。更加智能化:未来的ChatGPT可能会更加智能化,具有更强大的自然语言理解和生成能力,能够更好地理解和处理人类语言,并生成更加准确和流畅的文本。总之,Ch

旅游网站之数据分析

3:在Reduce节点执行类中,统计以城市ID为维度的酒店价格均价,并保存到Hbase;需要满足ROWKEY为城市ID、列族为average_infos、表字段名称为price,计算出的价格均价为表字段值。2:在Reduce节点执行类中,统计以评论中分词后的词组为维度的词频数量,并保存到Hbase。

Nacos服务注册中心应用(三)

Nacos(DynamicNaming and Configuration Service)是一个应用于服务注册与发现、配置管理的平台。它孵化于阿里巴巴,成长于十年双十一的洪峰考验,沉淀了简单易用、稳定可靠、性能卓越的核心竞争力。针对微服务架构中的服务发现、配置管理、服务治理的综合型解决方案。

2023美赛C题:预测Wordle结果-思路详解及参考代码

美赛C题:2023年 预测world结果

grafana监控nginx日志

用到组件:nginx ,filebeat,logstash,elasticsearch,grafana。需要注意的是最新的dashboard需要选择7.10+的elasticsearch,保存数据源后。2、filebeat 将nginx日志发往logstash,编辑filebeat.yml。本人喜欢

【大数据】记一次hadoop集群missing block问题排查和数据恢复

记一次 Hadoop 集群 missing block 问题解决及排查思路,集群环境总共有2个NN节点,3个JN节点,40个DN节点,基于hadoop-3.3.1的版本。集群采用的双副本,未使用ec纠删码。因为出现了missing block块高于namenode安全模式启动的阈值,导致nameno

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈