bitmap的原理及使用python实现最基础的bitmap
前段时间读公众号老看到bitmap或者hash值来解决大批量数据的排序或者去重的工作，当然这里的数据绝对不是平常所使用的小数据，而是可能纯文本数据大小都达到了上T的。正是因为自己多看了几眼，因此本文主要对bitmap进行python实现，并对其进行一定解释。bitmap原理实际上bitmap的原理很
饿了么青龙领吃货豆教程10.8更新（附脚本）
2022.10.8更新最新饿了么脚本，一天220+豆子
[hadoop全分布部署]安装Hadoop、配置Hadoop 配置文件②
一、配置 core-site.xml 文件参数二、配置 mapred-site.xml （Mapreduce参数）三、配置 yarn-site.xml
基于大数据的音乐推荐系统的设计与实现
摘 要时代风云变幻，技术日新月异，音乐平台个性化是大势所趋。大数据的时代下，如果连顺势而为都做不到，更别提做时代的弄潮儿了。今天的推荐系统是这样的，明天可能就是那样了，我们要紧抓时代的运势。本次设计为基于大数据的音乐推荐系统的设计与实现，主要目的是给用户推荐用户可能喜欢的音乐，使用了较为先进的基于
用Python编写一个电子考勤系统
实验项目简介学校现在需要实现一个电子考勤系统，考虑到你们班已经学过大数据应用开发语言Python，准备让你们实现部分学生端考勤功能。经过和老师的沟通，你了解到：（1） 目前该系统已经被学长实现了部分功能，你们只需要完成剩余功能即可，需要你们完成的功能会使用#todo的形式进行标注， todo后面会列
【数据库07】后端开发必备的大数据知识指南
介绍MapReduce原理，Hadoop，Kafka，Hive，Spark，Apach Storm等大数据框架，网罗后端开发必知必会的最前沿的大数据知识。
盘点AI的认证
近年来，在数字经济不断推进的大背景下，人工智能发展迅速，并与多种应用场景深度融合。深度理解人工智能行业，也逐渐成为推动经济创新发展的重要技术。AI认证作为衡量AI工程师能力水平的重要标准，越来越受到行业的青睐。今天我们就盘点一下哪些值得考的AI认证吧！
Spark SQL增量查询Hudi表
Hive增量查询Hudi表。最近可能会有Spark SQL增量查询Hudi表的需求，并且我发现目前用纯Spark SQL的形式还不能直接增量查询Hudi表，于是进行学习总结一下。本文总结了Spark SQL增量查询Hudi表的一些参数设置，并给出了示例，介绍了使用纯Spark SQL实现增量查询Hu
大数据开发——Hive实战案例
1. 创建表结构1.1 视频表结构1.2 用户表结构2. 准备工作2.1 创建临时表2.2 创建最终使用表2.3 对创建表进行解读3. 业务分析
[hadoop全分布部署]安装Hadoop、配置Hadoop 配置文件①
安装Hadoop、配置Hadoop 配置文件一、配置hadoop-env.sh文件二、配置 hdfs-site.xml 文件参数
[hadoop全分布部署]虚拟机Hadoop集群交换 SSH 密钥与验证SSh无密码登录
虚拟机Hadoop集群交换 SSH 密钥与验证SSh无密码登录
农业病虫害数据集与算法——调研整理
通过博客和文献调研整理的一些农业病虫害数据集与算法。
i春秋首届全国数据安全大赛部分复盘
2022年10月25日，为期两日的数据安全大赛于i春秋平台线上举行，在王队长的领队下，团队三个屁民开始了有趣的解题之旅。题目分为四个类型，分别是“安全知识”、“数据分析”、“数据算法”、以及数据安全。时间有点短，再加上有里还有活要干，所以很多题也没有答完，这次由我代表大家给大家进行一个复盘。
猿创征文｜后端开发工程师提升开发效率神器推荐
对于现在的后端工程师来说，并不仅仅局限于编写代码和解决bug，这两个要素了。如果你目前还只是忙碌的写代码和改bug的话，那要深度思考一下，我为什么日复一日的写这些重复代码？这样有何意义？或者说，有没有一些神器，使这些重复性的代码，编写一次即可，省下的时间，可以做一些有意义的事情？有没有一些开发神器，
单商户商城系统功能拆解20—售后订单
单商户商城系统，也称为B2C自营电商模式单店商城系统。可以快速帮助个人、机构和企业搭建自己的私域交易线上商城。单商户商城系统完美契合私域流量变现闭环交易使用。通常拥有丰富的营销玩法，例如拼团，秒杀，砍价，包邮，优惠券，大转盘抽奖，签到等等。配合当下流行的分销推广功能，可以快速拉新裂变，实现用户增长。
用Python对淘宝用户行为数据的分析
用户行为数据分析
主成分分析（PCA）及其可视化——python
一、主成分分析的原理主成分分析是利用降维的思想，在损失很少信息的前提下把多个指标转化为几个综合指标的多元统计方法。通常把转化生成的综合指标称之为主成分，其中每个主成分都是原始变量的线性组合，且各个主成分之间互不相关，这就使得主成分比原始变量具有某些更优越的性能。这样在研究复杂问题时就可以只考虑少数几
卡尔曼滤波
目录1.卡尔曼滤波入门2.学卡尔曼滤波的必备知识2.1.状态空间表达式2.2.高斯分布2.3.方差2.4.超参数2.5.卡尔曼直观图解3.卡尔曼滤波3.1.卡尔曼公式理解3.2.调节超参数3.2.1.Q和R的取值3.2.2.P0和X0的取值3.2.3.卡尔曼滤波的使用...
【软考】系统集成项目管理工程师（六）项目整体管理
软考中级——系统集成项目管理工程师备考干货第六章：项目整体管理。
虚拟机安装 Ubuntu 20.04-server 详细教程
Ubuntu 20.04-server 详细安装图文教程！！！
