pandas---数据处理
数据预处理1. DataFrame常用操作1.1 DataFrame去除空行（1）对于一般空行（2）对于列表式（list）空行1.2 数据的前期处理（1）DataFrame获取某一列的数据并去重（2）表格中填充01.3 数据的获取及筛选（1）获取某一行某一列的数据值（2）以某一列为比较条件的所有行
我们如何在代码中实现主从的选择-Java
问题描述：我们在分布式任务系统之中，会经常遇见一种情况，比如：定时的对任务进行刷新，然后进行一些操作。通常我们会将这个定时任我Job单独部署成一个服务，这个服务如果我们不进行主选择，便会出现多个服务同时进行刷新，造成业务的紊乱。解决方案：使用Zookeeper来进行主的选择1、添加对应的依赖<
ubuntu上配置好hadoop后，运行MapReduce
ubuntu上配置好hadoop环境后，运行官网MapReduce教程。
【2022年】浙江省专升本数学全面总结-(无穷级数)
本人是2022年考生，思维导图是一点一点收集起来的，分别从2011～2021真题卷题型为主以同济大学的绿皮书为基础收集，以文亮、精通、点对点等机构的押题为辅，并且以考过的各个知识点进行合理的雪花式拓展进行全面总结
【2022年】浙江省专升本数学全面总结-(空间解析几何与向量代数)
本人是2022年考生，思维导图是一点一点收集起来的，分别从2011～2021真题卷题型为主以同济大学的绿皮书为基础收集，以文亮、精通、点对点等机构的押题为辅，并且以考过的各个知识点进行合理的雪花式拓展进行全面总结，本文讲的是第六章节-(空间解析几何与向量代数)
【2022年】浙江省专升本数学全面总结-(一元函数微分学)
本人是2022年考生，思维导图是一点一点收集起来的，分别从2011～2021真题卷题型为主以同济大学的绿皮书为基础收集，以文亮、精通、点对点等机构的押题为辅，并且以考过的各个知识点进行合理的雪花式拓展进行全面总结，本文讲的是第二章节-(一元函数微分学)
摆平各类目标检测识别AI应用，有它就够了
在计算机视觉领域，CANN最新开源的通用目标检测与识别样例，通过其强大的可定制、可扩展性，为AI开发者们提供了良好编程选择。
消息队列-kafka关于CommitFailedException问题
说明：转载本人掘金文章概述提交offset失败这个异常也是我们开发中常见的异常，那么这个异常是怎么引起的呢？只要我们明白原因，那么就能避免，特别是在异步提交情况下（offset丢失），导致重复消费，消息一直卡在最后一批，导致业务数据受到严重的破坏。了解消费者实例机制1.kafka消费者都是按照批量消
为你的服务打针疫苗 —— 混沌工程
混沌工程未知，既然避不开，为何不拥抱它？在实际生产环境中，各种无法预知的事件难以避免，风险隐患无处不在。分布式系统架构的复杂性、海量数据的计算与存储、跨团队协同等，这些都在向系统的稳定性发起挑战。系统不确定性风险的加剧，最终将会波及到我们业务的连续性。你是否想过：如果整个区域或数据中心出现故障、服务
统计全球每年的最高气温和最低气温
文章目录数据准备1.下载数据2.处理数据一、统计全球每年的最高气温和最低气温1.YearMaxTAndMinT2.Mapper:MaxTAndMinTMapper3.Combiner:MaxTAndMinTCombiner4.Reducer:MaxTAndMinTReducer5.运行代码:MaxT
【Hadoop伪分布式安装】之安装JDK如何通过WinSCP将JDK上传到CentOS
文章目录前言一、WinSCP将JDK上传到CentOS1. WinSCP连接CentOS2. 连接成功3. 上传jdk-8u211-linux-x64.tar二、安装JDK1. 未上传JDK时，CentOS的/usr/java目录里面啥都没有2. 上传JDK成功可查看到jdk-8u211-linux
面试必问 | 聊聊Kafka的消费模型？
最近，有些读者去头条二面，被面试官问了一个关于Kafka的问题：多个Kafka消费者如何同时消费相同Topic下的相同Partition的数据？看似一个简单的问题，竟然把这位读者问懵了！今天，我们就一起来说说这个面试题，好了，开始今天的主题。
Scala编程实战 —— 一文学会编码大数据基础案例wordcount
使用scala编写代码实现spark的基础案例 WordCountwordcount是所有大数据框架都基本要做的案例，使用scala编写的wordcount代码对比hadoop更简洁更易写这主要是对scala集合中功能函数的熟悉与使用
分布式协调服务-ZooKeeper
What is ZooKeeper?
如何构建、部署运行Flink程序。
一、构建Flink程序构建一个Flink程序有两种方式# 方式一：构建 maven 工程，导入流式应用依赖包<!-- 基础依赖 --><dependency&.
GpMall电商系统 容器化部署
容器化部署GpMall
Rancher部署常用组件-redis、mysql、nacos等
首先选择 环境 - 应用 ，然后添加服务，不了解的可参考上篇Rancher安装redis参考的docker命令docker run --name redis -p 6379:6379 --restart=always -d redis:6.2.6 --requirepass qsxdr123! -v
spark2.4.0+scala2.11.12+sbt编程实现利用DataFrame读写MySQL的数据
1.要求(1) 在MySQL数据库中新建数据库sparktest，再建表employee，包含下列两行数据；idnamegenderage1AliceF222JohnM25表1 employee表原有数据mysql> create database sparktest;mysql> us
客快物流大数据项目(六十七)：客户主题
文章目录客户主题一、背景介绍二、指标明细三、表关联关系1、事实表2、维度表3、关联关系四、客户数据拉宽开发1、拉宽后的字段2、SQL语句3、
构建商业化思维，实现组织商业价值——商业分析学习笔记（1）
自从中国政府提出“互联网+”行动计划，很多行业和领域都经历了不同程度的变化。商业模式的创新，商业需求的变化、商业机会或者商业问题的呈现、也使得解决方案变得越来越多样化。而这一切都促使传统以关注执行为核心的项目管理向以商业价值为核心的全生命周期项目管理进行转变。商业分析与项目管理有着密切的联系，一旦某
