Spark 基本架构及运行原理
Spark运行架构包括集群资源管理器（Cluster Manager）、运行作业任务的工作节点（Worker Node）、每个应用的任务控制节点（Driver）和每个工作节点上负责具体任务的执行进程（Executor）。其中，集群资源管理器可以是Spark自带的资源管理器，也可以是YARN或Meso
离线和实时数仓技术架构梳理
对目前流行的离线数仓和实时数仓架构进行了梳理和对比
ChatGPT账号被封号了？不要急，这里有方法~
大家可以来试用哦，「V起来」从ChatGPT问世开始，不离不弃，已经稳定服务了5个月了。相比于市面上大多数打着免费的套壳产品，「V起来」持续在更新API，不断升级功能，并且优化体验！也省去了自己折腾被封号的烦恼！
你活了多久----快用Python计算一下日期
输入你的出生日期和现在的日期或者死亡日期，程序会自动计算你活了多久# 判断是否为闰年def runYear(year): if (year % 4 == 0 and year % 100 != 0) or (year % 400 == 0): return 1 else: retur
Apache Flink X Apache Doris构建极速易用的实时数仓架构
Doris针对不同的应用场景提供了不同的数据模型，分别为：明细模型，主键模型和聚合模型。明细模型：明细数据存储（日志分析、行为分析）主键模型：相同key的数据覆盖更新（订单状态、用户状态）聚合模型：相同key列value列合并（报表统计、指标计算）
hadoop组成及其架构
HDFS读写数据流程以及优缺点MapReduce工作原理及shuffle详解yarn工作机制、调度器及调度算法
【大唐杯备考】——5G网络架构的演进趋势（学习笔记）
本期介绍5G网络架构的演进趋势。
【5GC】开源5G核心网（Open5GS）架构详解
详细介绍Open5GS架构，包括，Open5GS 软件架构Open5GS 配置文件、Open5GS 初始化过程、NF 启动过程（AMF为例）、Open5GS 定时器机制、Open5GS 消息通知机制、Open5GS 内存管理、Open5GS 日志系统、Open5GS 有限状态机（FSM）介绍、Ope
关于ETL的两种架构（ETL架构和ELT架构）
在ELT架构中，ELT只负责提供图形化的界面来设计业务规则，数据的整个加工过程都在目标和源的数据库之间流动，ELT协调相关的数据库系统来执行相关的应用，数据加工过程既可以在源数据库端执行，也可以在目标数据仓库端执行（主要取决于系统的架构设计和数据属性）。当ETL过程需要提高效率，则可以通过对相关数据
一文看懂分布式存储架构
目录一、集中存储结构二、分布式存储1 、分布式存储的兴起2 、分布式存储的重要性3 、分布式存储的种类和比较三、分布式理论浅析1 、一致性和可用性2 、数据分布3 、复制4 、分布式协议5、跨机房部署四、分布式文件系统1、 Google 文件系统（ GFS ）2、 Taobao 文件系统（ TFS
[kitex + gorm-gen + hertz] 快速写出一个基于go的微服务
快速搭建go的微服务项目
java三层架构
的定义：三层架构就是为了符合“高内聚，低耦合”思想，把各个功能模块划分为表示层(UI) 、业务逻辑层(BLL)和数据访问层(DAL)三层架构。额外的还有一层实体类(Model) ，作为数据传递的载体，在各层之间传递数据。USL：User Show Layer表示层(也可以叫UI，即User Inte
Hive架构简述及工作原理
Hive是基于Hadoop的一个数据仓库管理工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL（HQL）查询功能。本质是将SQL转换为MapReduce程序（默认）。直接使用Hadoop MapReduce处理数据所面临的问题： 学习成本高，MapReduce实现复杂查询功能开发难度大，
HDFS架构概述
HDFS架构概述
【架构师】零基础到精通——网关策略
跟博主一起学习技术相关的 幂等、限流、降级、断路器、事务、缓存、分库分表 等总结！
Android MVVM详解
一、MVVM是什么？(1).Model:数据层，包含数据实体和对数据实体的操作(2).View:界面层，对应于Activity，XML,View，负责数据显示以及用户交互。(3).ViewModel：关联层，将Model和View进行绑定，Model或者View更改时，实时刷新对方。
RK3568开发笔记-EDP显示屏接口调试记录
RK3568CPU提供了丰富的外设接口，本文主要介绍通过edp显示接口驱动edp接口显示屏的具体操作方法以及调试记录。随着显示分辨率的越来越高，传统的VGA、DVI等接口逐渐不能满足人们的视觉需求。随后就产生了以HDMI、DisplayPort为代表的新型数字接口，外部接口方面HDMI占据了较大市场
系统架构：经典三层架构
经典三层架构是分层架构中最原始最典型的分层模式，其他分层架构都是其变种或扩展，例如阿里的四层架构模式和DDD领域驱动模型。阿里的 四层架构模型在三层基础上增加了 Manager 层，从而形成变种四层模型；DDD架构则在顶层用户界面层与业务逻辑层之间引入应用层，从而形成变种DDD领域驱动模型；掌握经典
Android 架构思想与 MVVM 框架封装
关于Android项目架构也是一个老生常谈的话题了，网上关于Android架构的文章不胜枚举，但是通过Google检索关键字，首页的热门文章多数是对于MVC、MVP及MVVM等架构的概念介绍，概念性的文章对于不了解Android架构的同学来说并不一定能起到很好的帮助。本篇文章其实源自笔者在公司内部的
【Python开发】Flask项目的组织架构
在大型Flask项目中，主要有三种常见的项目组织架构：功能式架构（也就是 Bluelog 程序使用的架构）、分区式架构和混合式架构。我们将以一个示例程序 myapp 作为示例来介绍这三种架构的特点和区别，这个程序按照功能主要分为三部分：前台页面 front、认证 auth、后台管理 dashboar
