Spark项目实战—电商用户行为分析
利用spark分析电商用户行为
Spark中RDD、DataFrame和DataSet的区别与联系
RDD代表弹性分布式数据集。它是记录的只读分区集合。RDD是Spark的基本数据结构。它允许程序员以容错方式在大型集群上执行内存计算。与RDD不同，数据以列的形式组织起来，类似于关系数据库中的表。它是一个不可变的分布式数据集合。Spark中的DataFrame允许开发人员将数据结构(类型)加到分布式
大数据技术（入门篇）--- 使用Spring Boot 操作 CDH6.2.0 Spark SQL进行离线计算
Spring Boot 操作 CDH6.2.0集群中的 Spark，使用Spark-SQL技术，实现离线计算，查询示例：简单的条件查询、稍微复杂一些的聚合查询、每行数据对象，转换为自定义Class对象、目标数据存储到MySQL数据库中、符合断言判断
【Kafka+Flume+Mysql+Spark】实现新闻话题实时统计分析系统（附源码）
【Kafka+Flume+Mysql+Spark】实现新闻话题实时统计分析系统（附源码）
5.1 Spark的安装与使用
第一关 Scala语言开发环境的部署 1.下载解压在Scala官网根据平台选择下载Scala的安装包scala-2.17.7.tgz解压到/app目录下：mkdir /app //创建 app 目录cd /opttar -zxvf scala-2.12.7.tgz -C /appeducode
漏洞复现：Apache Spark 命令注入（CVE-2022-33891）
ApacheSparkUI可以设置选项spark.acls.enable启用ACL，使用身份验证过滤器。用以检查用户是否具有查看或修改应用程序的访问权限。如果启用了ACL则HttpSecurityFilter中的代码路径可以允许用户通过提供任意用户名来执行命令。该功能最终将根据用户输入构建一个Uni
数据库审核工具SQLE部署及使用
点击上方蓝字关注我SQLE（ https://opensource.actionsky.com/sqle/ ）是由上海爱可生信息技术股份有限公司 开发并开源，支持多场景审核，支持标准化上线流程，原生支持 MySQL 审核且数据库类型可扩展的 SQL 审核工具。我们可以基于此工具进行数据库SQL审核，
基于Spark的电影推荐系统实现
受某视频网站委托，需开发一套基于Spark的大数据机器学习系统，应用协同过滤算法对网站客户进行电影推荐。本案例所使用的数据集说明如下： 评分数据集：/data/dataset/ml/movielens/ratings.csv 电影数据集：/data/dataset/ml/movielens/mo
实验7 Spark初级编程实践
1.实验目的（1）掌握使用Spark访问本地文件和HDFS文件的方法（2）掌握Spark应用程序的编写、编译和运行方法2.实验平台（1）操作系统：Ubuntu18.04（或Ubuntu16.04）；（2）Spark版本：2.4.0；（3）Hadoop版本：3.1.3。3.实验步骤（1）Spark读取
【大数据学习篇6】 Spark操作统计分析数据操作
8| 53.0| 53.0| 浙江省|2020-02-20 23:56:12|2020-02-20 23:56:16| 0.0|| 11|267.9| 0.0| 北京|2020-02-20 23:54:24|2020-02-20 23:54:31| 267.9||
《Spark大数据技术与应用》肖芳 张良均著——课后习题
《Spark大数据技术与应用》肖芳 张良均著——课后习题
大数据学习（七）一分钟了解数据建模
数据建模 ER建模 维度建模
educoder-Spark机器学习
头歌Spark机器学习实训答案代码
spark-sql字段级血缘关系实现
spark-sql 表字段血缘关系可视化案例
spark法律服务大数据智能推荐（自己动手做的，完整过程+源码）
与搜索引擎不同，推荐系统并不需要用户提供明确的需求，而是通过分析用户的历史行为，主动为用户推荐能够满足他们兴趣和需求的信息。为了能够更好地满足用户需求，需要依据其网站的海量数据，研究用户的兴趣偏好，分析用户的需求和行为，发现用户的兴趣点，从而引导用户发现自己的信息需求，将长尾网页（长尾网页是指网页的
Spark on Yarn 部署模式运行常用参数和认证参数理解
spark 提交任务参数说明
2万字硬核spark源码精讲手册
spark源码精讲，结合企业级开发和面试实战重点关注内容
第一部分：Spark基础篇
Spark基础篇包含：job运行流程、任务提交阶段、运行原理、与MR的区别、RDD、DAG、算子类等知识点
spark启动不成功
spark在同一节点启动多个spark master（worker）
Flink第一章:环境搭建
Flink也是现在现在大数据技术中火爆的一门,反正大数据的热门技术学的也差不多了,啃完Flink基本的大数据技术就差不多哦学完了.Flink是做数据实时分析必不可少的技术,也要学习.
