DataX二次开发——（6）kafkareader、kafkawriter的开发
基于阿里开源DataX3.0版本，开发kafka的读写驱动，可以实现从mysql、postgresql抽取数据到kafka，从kafka 消费消息写入hdfs等功能。
同城预约小程序上门服务上门理疗推拿按摩系统养生美容行业程序源码
在这个工作生活压力巨大的社会，大家恨不得一分钟掰成两半过，别提什么休闲娱乐了，能睡个饱觉就已经是奢侈了！工作固然重要，身心的放松也需要重视，好在随着互联网＋的发展，越来越多的行业开始提供上门服务，特别是美甲、美容、按摩、推拿、理疗等行业。上门服务其实就是指由服务人员到达用户指定地点提供服务的模式，是
RabbitMq图形界面创建队列操作步骤
RabbitMq
RDD常用算子总结
RDD常用算子
hdfs分布式文件系统 默认数据存放路径、及相关配置属性详细解析
b.复制{/tmp/hadoop-hyxy/dfs/name}至{/home/hyxy/tmp/hadoop/dfs}的路径下，问题解决。失败的原因是：我们在core-site.xml修改了tmp路径：【/home/hyxy/tmp/hadoop】，启动namenode服务的时候，系统找不到原来的路
大数据生态中的 RocketMQ 5.0
随着RocketMQ 5.0的发布，RocketMQ 在处理消息、事件和流上实现了统一，有了越来越强大的优势，存储和计算分离的特性也使其能提供更低的成本，使企业上云更省钱、更省力，也更省人力。
RabbitMQ消费消息坑：failed to convert serialized Message content
RabbitMQ消费消息坑：failed to convert serialized Message content；SpringCloud整合RabbitMQ（入门到精通）
RabbitMQ 教你如何创建虚拟主机
虚拟主机可以理解为RabbitMQ中的重大特点，实际上在之前就已经存在虚拟主了。RāobitMQ如果没有配置，则默认会存在一个虚拟主机，当然用户也可以建立自己的虚拟主机，并目每一个虚拟主机中有自己的队列信息。
MySQL、HBase、ElasticSearch三者对比
MySQL：关系型数据库，主要面向OLTP，支持事务，支持二级索引，支持sql，支持主从、Group Replication架构模型（本文全部以Innodb为例，不涉及别的存储引擎）。HBase：基于HDFS，支持海量数据读写（尤其是写），支持上亿行、上百万列的，面向列的分布式NoSql数据库。天然
RabbitMQ常见问题解决方案——消息丢失、重复消费、消费乱序、消息积压
RabbitMQ的消息丢失、重复消费、消费乱序、消息积压问题，非常常见，如何解决必须掌握。消息中间件在业务开发当中具有举足轻重的地位，很多场景/问题下都可以依托于消息中间件来实现，所以消息中间件的很多问题也是在面试的高频点。
Hadoop
Hadoop Distributed File System，简称 HDFS，是一个分布式文件系统。NameNode（nn）：存储文件的。
kafka连接zookeeper配置搭建环境、安装和启动，Windows环境下
kafka，分布式集群架构下，高性能的流式事件数据（主要是消息）集成、发布（生产）和订阅（分发、消费）组件（中间件）。kafka依赖zooeeper（数据后端），这里有Windows下安装配置启动zookeeper的 文章（1）：Windows 10环境zookeeper单机伪集群部署和配置_Zha
Java语言链接MongoDB常用的方法
MongoDB官方提供了Java和Python语言的驱动包，利用这些驱动包可使用多种编程方法来连接并操作MongoDB数据库。本节将介绍如何设置和使用MongoDBJDBC驱动程序，通过JDBC实现与MongoDB服务端的通信功能，用户可以在此基础上进行各种Java程序的开发。MongoDB作为一种
【Hadoop生态圈】10.使用Sqoop迁移MySQL数据到HDFS中
Sqoop(发音：skup)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递，可以将一个关系型数据库（例如 ： MySQL ,Oracle ,Postgres等）中的数据导进到Hadoop的HDFS中，也可以将HDFS的数据导进
联邦学习隐私保护相关知识总结
针对隐私保护的法律法规相继出台，数据孤岛现象已成为阻碍大数据和人工智能技术发展的主要瓶颈，联邦学习作为隐私计算的重要技术被广泛关注，主要对联邦学习相关知识进行了总结
搭建hadoop高可用集群（二）
搭建hadoop高可用集群（二）
融资约束指数：SA、KZ、WW （1999至2020年）
融资约束指数：SA、KZ、WW （1999至2020年）
系统架构设计——互联网金融架构设计
根据第三方机构预统计，自2016年-2019年，我国零售信贷规模维持20%以上的高复合增长率，2017年中国零售信贷规模达到27万亿，到2019年，总规模超过37万亿。近年来互联网金融蓬勃发展，在借贷、保险、股权等领域涌现出一大批互联网与金融场景相结合的创新产品。同时作为互联网金融的子领域消费金融领
【Kafka】基于Docker的KRaft模式(无Zookeeper)集群安装及测试
最近项目中想使用kafka做消息系统，但安装好像很复杂，现在把安装过程记录一下。主流的安装方式是在服务器上直接安装，而我希望的是使用Docker。主流的Kafka使用Zookeeper，但最近Kafka将会逐步舍弃Zookeeper而使用自带的KRaft所以以下步骤是基于Docker安装无Zooke
用结构化思维吃透MySQL面试题——再也不怕连环问
MySQL基础知识的掌握是必须要会的，比如：create、insert、update、delete、select、drop、alter、show等。这些在企业生产当中会经常使用；存储引擎主要是针对数据库脚本进行解析、分析、优化和执行、索引、及数据结构；在关系型数据库中，事务的重要性不言而喻，事务具有
