架构师之路 — 架构师的职责
目录文章目录目录高级程序员技术经理技术总监CTO软件架构师（Software Architect）解决方案架构师（Solution Architect）高级程序员高级程序员的主要职责是：实现复杂功能，编写核心代码；处理线上 bug，解决技术难题。技术经理技术经理的主要职责是：开发任务分派。开发工作量
MySQL高级查询
目录一、排序二、分页查询三、聚合函数四、分组查询五、连接查询1. 内连接查询2. 左连接查询3. 右连接查询4. 自连接查询六、子查询
一天学完spark的Scala基础语法教程十三、文件IO操作(idea版本)
????前言????????博客主页：红目香薰_CSDN博客-大数据,计算机理论,MySQL领域博主????✍本文由在下【红目香薰】原创，首发于CSDN✍????2022年最大愿望：【服务百万技术人次】????????初始环境地址：【spark环境搭建(idea版本)_红目香薰-CSDN博客】???
Spark追妻系列(TopN案例和动作算子)
Spark中的TopN案例
电商大促作战指南
电商大促作战指南、全链路压测
电商大促作战指南之全链路压测
电商大促作战指南、全链路压测、营销
知识图库系统
知识图库系统
金融风控实战——Hive详解（数据读取、预处理、特征工程）
大数据技术介绍大数据技术的介绍： 1、存储，我们需要了解在大数据的架构下，数据大致是怎么进行存储的，传统的文件系统是单机的，不能横跨不同的机器。HDFS（Hadoop Distributed FileSystem）的设计本质上是为了大量的数据能横跨成百上千台机器，但是用户在实际的应用中，看到的是一
大数据看惊天逆转+绝杀，亚洲杯时隔16年夺冠，恭喜女足
这个逆转真的是看得人热泪盈眶，女足姑娘们诠释了真正的足球精神！中国精神！全力以赴，一以贯之！铿锵玫瑰！
hadoop 使用 kerberos 认证后，hadoop fs -ls 命令、hdfs dfs -ls 无法使用
解决启用 kerberos 认证的 hdfs 集群 遇到的无法使用hadoop、hdfs命令的问题
Hadoop生态圈（二十一）- MapReduce编程基础
MapReduce Partition分区，MapReduce Combiner规约，MapReduce自定义对象序列化，MapReduce自定义排序，MapReduce自定义分区，MapReduce自定义分组，自定义分组扩展：topN问题，默认情况下MR输出文件个数，数据分区概念，默认分区规则，P
SpringBoot整合Elasticsearch之索引，映射，文档，搜索的基本操作案例分析
索引，映射，文档，DSL增删改查一）环境准备1. ES版本：7.12.12. SpringBoot版本：2.5.8二）ES的基本介绍1. Elasticsearch 是什么2. Eelasticsearch的作用3. Elasticsearch，Solr和Lucene三者之间的关系4. Elasti
Hadoop入门（一）
Hadoop是一个有Apache基金会所开发的分布式系统基础架构主要解决海量数据的存储和海量数据的分析计算问题
【大数据】Hive可视化工具dbeaver
Hive可视化工具dbeaver1、dbeaver基本介绍dbeaver是一个图形化的界面工具，专门用于与各种数据库的集成，通过dbeaver我们可以与各种数据库进行集成通过图形化界面的方式来操作我们的数据库与数据库表，类似于我们的sqlyog或者navicat。2、下载dbeaver我们可以直接从
DataX 简介及架构原理
DataX 简介及架构原理概述DataX是阿里巴巴使用 Java 和 Python 开发的一个异构数据源离线同步工具异构数据源：不同存储结构的数据源致力于实现包括关系型数据库 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(
深入浅出Apache DolphinScheduler
Apache DolphinScheduler 是一个大数据调度任务框架。从当前的CSDN GitCode热度来看，在二月份排名第6位。那是相当的热门。Apache DolphinScheduler 是Apache旗下的开源项目，目前已经被Fork了2700次，Star了7.3k；这还是相当厉害了！
RocketMQ源码解析-Broker部分之Broker启动过程
启动入口BrokerStartup
三天学会网络爬虫之Day03
三天学会网络爬虫之Day03第一章 课程计划第二章 案例扩展2.1.定时任务。2.1.1.Cron表达式2.1.2.Cron测试2.2.网页去重2.2.1.去重方案介绍2.2.2. SimHash2.2.2.1.流程介绍2.2.2.2.签名距离计算2.2.2.3.导入simhash 工程2.3.代理
【大数据】OLAP架构及技术实现的演进简介
文章目录一、架构分类二、技术演进1、传统关系型数据库时期2、大数据技术时期一、架构分类OLAP名为联机分析，又称多维分析，什么是多维分析，指的是多种不同的维度审视数据，进行深层次分析。进行分析必不可少对数据进行下钻、上卷、切片、切块、旋转等操作，为了更加直观，我们可以使用立方体来表示。下钻：从高层次
