overfit同步小助手
文章同步
Hive group by 数据倾斜问题处理
发现一个10.19号的任务下午还没跑完，正常情况下，一般一个小时就已经跑完，而今天已经超过3小时了，因此去观察实际的任务，发现9个map 其中8个已经完成，就一个还在run，说明有明显的数据倾斜。在一小时内结束，并且没有哪个节点耗时较长。发现有使用group by。
Debezium系列之：为接入的每条数据新增键值对
Debezium系列之：为接入的每条数据新增键值对
【大数据基础之java单列集合】
java单列集合
一个基于Python数据大屏可视化开源项目
这是一个基于Python开发的，结构简单的项目。可通过配置Json的数据，实现数据报表大屏显示。在app.py修改SourceData，或者新增比如新增：MyReportData。1、Python + Js + Css + Html开发。优点：代码清晰、结构简单、配置Json数据实现。在data.p
【Apache Spark 】第 7 章优化和调优 Spark 应用程序
在上一章中，我们详细介绍了如何在 Java 和 Scala 中使用数据集。我们探索了 Spark 如何管理内存以适应 Dataset 构造，并将其作为其统一和高级 API 的一部分，并且我们考虑了与使用 Datasets 相关的成本以及如何降低这些成本。除了降低成本，我们还想考虑如何优化和调整 Sp
【Apache Spark 】第 9 章使用 Apache Spark构建可靠的数据湖
在前面的章节中，您学习了如何轻松有效地使用 Apache Spark 构建可扩展的高性能数据处理管道。然而，在实践中，表达处理逻辑只解决了构建管道的端到端问题的一半。对于数据工程师、数据科学家或数据分析师来说，构建管道的最终目标是查询处理过的数据并从中获得洞察力。存储解决方案的选择决定了数据管道的端
大数据必学Java基础（八十三）：Junit单元测试
软件的白盒测试是对软件的过程性细节做细致的检查。这种方法是把测试对象看做一个打开的盒子，它允许测试人员利用程序内部的逻辑结构及有关信息，设计或选择测试用例，对程序的所有逻辑路径进行测试,通过在不同点检查程序状态，确定实际状态是否与预期的状态一致。这种方法是把测试对象看做一个黑盒子，测试人员完全不考虑
开发人员提高开发效率的10个推荐工具
推荐10个能够提高开发人员开发效率的10个工具
大数据必学Java基础（八十二）：基于UDP的网络编程
客户端：Socket程序感受到的使用流 ：输出流服务器端： ServerSocket --> Socket 程序感受到的使用流 ：输入流（客户端和服务器端地位不平等）发送方：DatagramSocket 发送：数据包 DatagramPacket接收方：DatagramSoc
[C语言简明教程] 指针的进阶（上）
指针的进阶，C语言的内功
【C语言】预处理详解，宏与函数的区别对比
预处理详解，宏与函数的区别对比
Java数据结构：使用数组模拟队列（队列与环形队列）
本文介绍了队列这一数据结构，并通过数组的方式分别实现了队列与环形队列。环形队列解决了队列无法复用的问题。文中附有实现的完整代码，供读者学习使用。
优先级队列 - 堆 - PriorityQueue
本文 ： 优先级队列
【DS】树和二叉树的理论知识梳理
介绍树和二叉树的相关概念和性质.
C++类和对象详解
1 面向过程和面向对象的初步认识2 类的引入3 类的定义4 类的封装及访问限定符4.1 封装4.2 访问限定符5 类的作用域6 类的实例化7 类对象模型7.1 类对象的存储方式7.2 如何计算类对象的大小7.3 结构体内存对齐规则8 命名习惯：驼峰法9 this指针9.1 this指针的引入9.2
【Linux】第五章 环境变量（概念补充+作用+命令+main三个参数+environ+getenv()）
mian 函数可以带参数，argc （命令个数，执行该可执行文件时传入的几个命令）、 char * argv[] （指针数组，存放了每一个命令的常量字符串）、char* env[]（环境变量），其中char* env[]也是指针数组，每个程序会收到一个环境表，他就是这个指针数组，每个指针指向一个 ‘
【C++学习】类与对象（下）
详细讲解了六大默认成员函数中的取地址和const取地址运算符重载，还介绍了类与对象中的几个概念，包括友元，static成员，内部类，匿名对象等。
传统的回调函数与 ES6中的promise回调以及 ES7 的async/await终极的异步同步化
传统的回调函数与 ES6中的promise回调以及 ES7 的async/await终极的异步同步化
WEB前端-背景属性
img和背景图片的区别： img不需要专门写宽高就能够显示在页面上 而背景图片默认是撑不开容器的 需要专门写宽高 一般产品插入图都推荐使用img 而一些小的icon 或者很少更新的图片 再或者超大的图片推荐使用背景图 而且背景图可以让内部的文字盖在上面，但是img不行（除非后期用定位）取值：no-r
H5小游戏1—— 是男人就下一百层（附完整源码）
H5小游戏1—— 是男人就下一百层源码也可在文末免费获取。演示地址：https://code.haiyong.site/moyu/100/演示视频：https://www.bilibili.com/video/BV1bK411D7cJ