大数据 | Spark安装及性能测试
Spark On Yarn集群模式下的安装和基本测试
Spring项目整合 RabbitMQ消息队列，动态创建队列与交换机
RabbitMQ是一个被广泛使用的开源消息队列。它是轻量级且易于部署的，它能支持多种消息协议。RabbitMQ可以部署在分布式和联合配置中，以满足高规模、高可用性的需求。，初始默认用户名/密码guest/guest。至此，RabbitMQ的安装和配置完成。......
Java就业前景如何？
并且Java在人工智能、新能源、电子芯片、企业数字化服务等新经济领域都有不凡的表现，所以2023年的Java依然是发展趋势强盛，有就业前景也有就业需求，合格的Java工程师依然是紧缺的。招聘需求方面，无论是比较火爆的互联网行业还是传统行业，都有Java的岗位需求，Java人才依然是软件职位分类中最受
【架构实践】《业务实时质量监控预警平台》系统设计文档
预警和报告可以与规则引擎、数据存储和查询、预警和报告等相关组件建立关系。总之，业务实时质量监控预警平台的数据架构需要包括业务数据源、数据采集层、数据处理层、数据存储层、数据可视化层、预警和告警层、自动化流程层、配置管理层等模块，以实现对业务的实时监控、预警和告警、数据分析和可视化等功能。总之，业务实
zookeeper从安装到入门
zookeeper的安装以及一些基础知识
springboot 集成 Swagger2 配置以及常用注解的说明和使用 （ 超详细）
一、注解的使用 和 说明结构化说明如下：@Api：用在请求的类上，表示对类的说明 tags="说明该类的作用，可以在UI界面上看到的注解" （也就是给类取别名） value="该参数没什么意义，在UI界面上也看到，所以不需要配置" @ApiOperation：用在请求的方法上，
零基础可以学python么
零基础自然是可以学习python的，Python具有简单、易学、免费、开源、可移植、可扩展、面向对象等优点，斩获无数程序员的喜爱，也有了“人生苦短，我选Python”的名言。近几年Python一路高歌猛进，受欢迎程度有目共睹，对此，TIOBE官方也表示“Python很适合数据挖掘、人工智能编程、统计
实战：kafka、zookeeper SASL+ACL实现动态权限认证、授权
kafka基于SASL/SCRAM 集合zookeeper SASL，实现安全认证、权限校验ACL。
【Kafka】MM2同步Kafka集群时如何自定义复制策略(ReplicationPolicy)
使用MM2同步集群数据，默认的复制策略为：DefaultReplicationPolicy，这个策略会把同步至目标集群的topic都加上一个源集群别名的前缀，比如源集群别名为A，topic为：bi-log，该topic同步到目标集群后会变成：A.bi-log，为啥这么做呢，就是为了避免双向同步的场景
用idea操作hbase数据库，并映射到hive
用idea操作hbase数据库，并映射到hive
RabbitMQ（四） | 惰性队列 - 解决消息堆积问题
接上一篇：RabbitMQ（三） | 死信交换机、死信队列、TTL、延迟队列（安装DelayExchange插件）当生产者发送消息的速度超过了消费者处理消息的速度，就会导致队列中的消息堆积，直到队列存储消息达到上限。之后发送的消息就会成为死信，可能会被丢弃，这就是消息堆积问题。解决消息堆积有两种思路
Kafka 入门篇（二）
生产者分区机制分区策略顺序轮询随机轮询按照 key 进行消息保存生产者压缩机制Kafka 压缩是什么Kafka 重要参数配置key.serializervalue.serializeracksbuffer.memorycompression.typeretriesbatch.sizeclient.i
Kettle（7）：插入/更新组件
插入/更新组件能够将Kettle抽取的数据，与某个表的数据进行对比，如果数据存在就更新，不存在就插入。
BigTop3.2.0 大数据组件编译--组件编译
接上篇环境准备，环境准备好以后就可以开始bigtop大数据组件编译了，建议使用科学上网方式，降低网络连接报错，主要网络报错出现在nodejs npm yarn bower等前端资源的下载上。搞定网络问题后，按本文的方式可以完成大数据相关组件的编译，编译后生成的rpm包在output目录中，包含源码r
【AI人工智能】AI会对你的行业产生什么影响？
随着技术的不断发展，AI已经开始深刻影响着各行各业。从生产制造到金融、医疗和交通等行业，人工智能技术都在发挥着越来越重要的作用。现在让我们一起探讨人工智能技术对未来各行业的影响、发展和创造的机会，及如何应对。你可以从以下几个方面进行创作（供参考）
元宇宙与ChatGPT结合 一场颠覆式场景革命或将到来？
通过在元宇宙中构建虚拟的企业世界，企业决策者和管理者可以深入了解企业运营和管理的各个方面，从而指导决策和管理策略的优化，提高企业的效率和竞争力，推动企业的数智化转型和创新。元宇宙和ChatGPT都是当前数字化领域中非常热门的技术和应用，两者之间也存在一定的关系，结合起来，可以为企业提供更加智能化、个
MapReduce 编程实例：词频统计
1.右击resources目录，单击【new】选择【resources bundle】，弹出下图界面输入log4j，单击【ok】按钮。在export目录下，创建wordcount目录，在里面创建words.txt文件，向words.txt输入下面内容。2.在弹出的【Create Resource B
【数据预处理】基于Kettle的字符串数据清洗、Kettle的字段清洗、Kettle的使用参照表集成数据
本次实验内容如下：掌握基于Kettle的字符串数据清洗掌握基于Kettle的字段清洗掌握基于Kettle的使用参照表清洗。
爬虫+数据分析+可视化大作业：基于大数据的高质量电影分析报告
在我们的日常生活中，电影已经成为了我们娱乐放松活动所不可缺少的元素。然而，自电影诞生以来，人们每天都在生产着电影，却又生产着质量良莠不齐的电影。在这些几乎是无穷无尽的电影洪流中，如何挑选一部高质量电影，成为了电影爱好者乃至平民百姓的首要问题。与此同时，作为电影拍摄团队，如何从高质量电影中找到共性，从
DolphinScheduler2.0版本升级3.0版本方案
因项目需要使用数据质量模块功能，可以为数仓提供良好的数据质量监控功能。故要对已有2.0版本升级到3.0版本以上，此次选择测试了3.0.1 和 3.1.1 两个版本，对进行同数据等任务调度暂停等操作测试，最后选择3.0.1 版本原因：1. 3.1.1 在测试sql任务时 ，同时启动上百sql 任务时，
