Scala的安装与配置
Scala安装配置及介绍一、为什么要学Scala1. Scala介绍Scala基于JVM，和Java完全兼容，同样具有跨平台、可移植性性好、方便的垃圾回收等特性是一门函数式编程语言Scala更适合大数据的处理Scala对集合类型数据处理有非常好的支持spark的底层用Scala编写2. Scala特
Scala 基础 （三）：运算符和流程控制
Scala中的运算符和Java中的运算符基本相同。算术运算 ，和在一元运算表中示正号和负号，在二元运算中表示加和减。表示整除，只保留整数部分舍弃掉小数部分除此之外，也表示两个字符串相加关系运算逻辑运算赋值运算位运算在 Scala 中其实是没有运算符的，所有运算符都是方法的调用。举个栗子：二、流程控制
spark 安装详细步骤
3、在目录/home/hadoop/software下解压：tar -zxvf spark-1.6.2-bin-hadoop2.6.tgz。4、进入conf目录,复制文件cp spark-env.sh.template spark-env.sh。6、cd 切换到sbin目录下使用 ./start-a
详解Kafka 3.0 稳定版新特性
Kafka 2.8.0正式发布了KRaft的先行版，并且支持在KRaft模式下的部署和运行。KRaft模式下的Kafka可以完全脱离Zookeeper运行，使用自己的基于Raft算法实现的quorum来保证分布式Metadata的一致
idea安装scala
idea上安装scala插件教程
scala模式匹配
但是Scala的模式匹配的功能比Java的swtich case语法的功能要强大的多，Java的switch case语法只能对值进行匹配。Scala的模式匹配除了可以对值进行匹配之外，还可以对类型进行匹配、对Array和List的元素情况进行匹配、对case class进行匹配、甚至对有值或没值（
Flink学习:Flink常见报错
flink error
spark入门案例以及sbt安装与打包（Linux环境）
sbt 安装与打包应用程序源码放spark-submit执行，包含问题处理
Scala --- Array方法大全（一）
Scala --- Array方法大全
Spark读取CSV文件（Scala）
header: 是否指定首行作为schema。format: 指定读取的文件格式：csv。schema: 指定数据字段的格式。
Swagger Ui使用介绍（建议收藏)
swagger 是一个规范和完整的框架，用于生成、描述、调用和可视化 RESTful 风格的 Web 服务。总体目标是使客户端和文件系统作为服务器以同样的速度来更新。文件的方法，参数和模型紧密集成到服务器端的代码，允许API来始终保持同步。作用：1.接口文档自动在线生成。2.功能测试。Swagger
windows安装scala
windows安装scala
python 安装pyspark_Python学习—PySpark环境搭建
PySpark环境搭建
Hudi编译安装
（1）上传apache-maven-3.6.1-bin.tar.gz到/opt/software目录，并解压更名。修改了Hive版本为3.1.2，其携带的jetty是0.9.3，hudi本身用的0.9.4，存在依赖冲突。否则在使用DeltaStreamer工具向hudi表插入数据时，也会报Jetty
【Spark】scala基础入门
scala基础教程（面向对象、函数式编程、静态类型等等特点），附带基础简单的栗子
Spark 安装与启动
如果你事先安装了Spark对应版本的Hadoop，那么可以选择forHadoopx.x类型，如果你安装的Hadoop版本没有对应的Spark，可以选择Pre-builtwithuser-providedApacheHadoop类型。选择Spark版本和Package类型之后，自动会为你生成spark
大数据系列 | 全国职业院校技能大赛大数据应用技术赛项笔记分享-离线抽取模块
写在前面：此笔记是本人在备战2022年大数据赛项整理出来的，不涉及国赛涉密内容，如点赞收藏理想，我将会把所有模块的笔记开源分享出来，如有想询问国赛经验的可以关注私聊我，我会一一回复。Scala 是一门满足现代软件工程师需求的语言；它是一门静态类型语言，支持混合范式；它也是一门运行在 JVM 之上的语
spark实训题 -- Scala基础编程【1】
目录实训目的实训1：编写函数过滤文本中的回文单词1. 训练要点2.需求说明3.思路及步骤实训2：使用Scala编程输出杨辉三角1. 训练要点2.需求说明3.思路及步骤实训3：用Scala编程求出100~999之间的所有水仙花数。实训目的( 1)掌握Scala的REPL使用。(2)掌握Scala的Ar
idea关联scala与spark开发（全）
idea关联scala与spark开发（全）
flink任务提交,查询,停止工具
因项目，需要在spring boot后台项目中集成flink任务提交，查询之类的功能，所有有了这个项目这个项目，可以通过java api的形式，帮助你提交，查询，暂停flink任务，也可以构建和关闭flink yarn session集群。主要通过restful接口和构建jobGraph实现。
