官宣｜Apache Flink 1.19 发布公告
Apache Flink PMC（项目管理委员）很高兴地宣布发布 Apache Flink 1.19.0。
Hive 2.3.0 安装部署（mysql 8.0）
hive mysql centos7安装
spark
1，Spark是一种基于内存的快速、通用、可扩展的大数据分析计算引擎， 是当今大数据领域最活跃、最热门、最高效的大数据通用计算平台之一。
嬛嬛喊你学Spark、Scala的安装
目前，Spark生态系统已经发展成为一个包含多个子项目的集合，其中包含SparkSQL、Spark Streaming、GraphX、MLlib等子项目，Spark是基于内存计算的大数据并行计算框架。Spark得到了众多大数据公司的支持，这些公司包括Hortonworks、IBM、Intel、Clo
Flink-1.18.1环境搭建
home/postgres/flink/flink/bin/config.sh:行32: 未预期的符号 `<' 附近有语法错误 /home/postgres/flink/flink/bin/config.sh:行32: ` done < <(find "$FLINK_LIB_DIR"!不要用sh命令
数据仓库——环境
数据仓库是一个面向主题的、集成的、非易失的、随时间变化的用来支持管理人员决策的数据集合。
重生之我在湖科职学Spark
重生之我在湖科职跟着宇将军学习Spark，好学，爱学，麦克阿瑟将军也说好!!!
Spark概述
Apache Spark是专为大规模数据处理而设计的快速通用的计算引擎。现在形成一个高速发展应用广泛的生态系统。Spark 主要有三个特点 :首先，高级 API 剥离了对集群本身的关注，Spark 应用开发者可以专注于应用所要做的计算本身。其次，Spark 很快，支持交互式计算和复杂算法。最后，Sp
基于Python+大数据城市景观画像可视化系统设计和实现
# 背景意义：Python与大数据城市景观画像可视化的设计与实现随着城市化进程的不断加速，城市景观已经成为人们生活中不可或缺的一部分。城市景观反映了城市的文化底蕴、发展水平、生态环境等多方面特征，对城市形象的塑造和城市管理的提升具有至关重要的作用。同时，随着大数据技术的不断发展和普及，城市数据已经成
spark概述与scala的安装
Spark基于内存式计算的分布式的统一化的数据分析引擎。
跨地域传文件时 面临的安全、效率等问题要如何解决？
近年来，企业在异国、异地设立分支机构的越来越多，在日常经营中，企业总部和分支机构间存在平行、垂直及互相交叉的管理模式和业务往来需求，因此，大型企业存在必然的跨地域传文件场景，比如跨地理域文件交换、跨组织域文件交换、跨网络安全域文件交换。《Ftrans CDS跨域文件交换集中管控系统》，帮助企业构建统
大数据培训之Zookeeper零基础-1
在大数据中，几乎所有的框架，它的安装都提供了三种模式单机模式：在一台服务器上安装，往往能够启动这个框架的部分服务伪分布式：在一台服务器上安装，但是利用多个线程模式分布式环境，能够启动这个框架的大部分甚至于服务分布式：在集群上安装，能够启动这个框架的所有服务现阶段，先安装单机模式，搞定所有的概念之后，
Flink 2.0 状态存算分离改造实践
本文整理自阿里云智能 Flink 存储引擎团队兰兆千在 FFA 2023 核心技术（一）中 的分享，内容关于 Flink 2.0 状态存算分离改造实践的研究。
从“手写病例”到“AI家庭医生”，人工智能大数据如何走进我们的生活？
编辑：老彭来 源：大数据架构师彭友们好，我是老彭。最近“X疾病”肆虐，彭友们要小心啊，一定要保重身体。老彭去年就老去医院，不知道是不是“X疾病”闹的。上周末我特意找国家卫健委沈剑峰沈博士请教，顺便叙叙旧，他给我们讲了很多很有意思的医学新进展。老彭现在转述给彭友们，让我们康康人工智能、大数据是如何赋能
Hadoop面经
Hadoop面经
Hadoop笔记
大数据指高速 (Velocity) 涌现的大量 (Volume) 多样化 (Variety) 具有一定价值（ Value ）并且真实（ veracity ）的数据，其特性可简单概括为 5V高速: 数据每秒产生的速度相对比较块大量: 数据总量一般比较庞大，所考虑的存储和计算与一般的其他技术会不一样。
Hadoop：认识MapReduce
随着需要处理的数据量激增，我们开始借助分布式并行编程来提高程序的性能，分布式并行程序运行在大规模计算机集群上，可以并行执行大规模数据处理任务，从而获得海量计算的能力。谷歌公司最先提了分布式并行模型MapReduce，hadoop MapReduce则是其的开源实现。传统并行计算框架MapReduce
盘点五种主流的大数据计算框架
Apache Spark：Apache Spark是一个快速、通用的大数据处理框架，它支持在内存中进行高性能的数据处理。Spark提供了一系列的API，包括基于批处理的Spark Core，基于流处理的Spark Streaming，基于图计算的GraphX，以及基于机器学习的MLlib。Apach
最简单的Hadoop+Spark大数据集群搭建方法，看这一篇就够啦
最近有小伙伴私信我，flink 软件安装在虚拟机上很简单，就是安装包解压即可，有没有 hadoop + spark 的安装文档呢？所以今天周六刚好不用上班，花了一天时间整理了一下自己现在使用集群的搭建过程，希望对各位小伙伴有帮助！Tips：以下是集群搭建过程的记录啦，word 文档和搭建好了的集群，
大数据数据分析-scala、IDEA、jdk之间的搭配关系
Scala主要是一门面向对象编程语言和函数式编程语言。- ---以HADOOP 2. x为系列的大数据生态系统处理框架离线数据分析，分析的数据为N+1天数据并行计算框架，分而治之----Hive基于SQL处理框架，将SQL转换为MapReduce，处理存储在HDFS上的数据，并且运行在
