Kerberos简单介绍及使用
Kerberos 下的用户可以称为 Principal，当每添加一个用户或服务的时候都需要向kdc添加一条principal, principal的形式为：主名称/实例名@领域名。第一部分是service的名字，比如imap， AFS， ftp. 通常’host’这个名字被用于指明对一台机器的通用的
百战c++（数据库2）
写满了：redo log 里的容量是有限的，如果数据库一直很忙，更新又很频繁，这个时候 redo log 很快就会被写满了，这个时候就没办法等到空闲的时候再把数据同步到磁盘的，只能暂停其他操作，全身心来把数据同步到磁盘中去的，而这个时候，就会导致我们平时正常的SQL语句突然执行的很慢，所以说，数据库
Flink SQL自定义表值函数（Table Function）
Flink SQL自定义表值函数（Table Function）
Hive表DDL操作（二） 第2关：Create/Drop/ALTER 索引
Hive表DDL操作（二）第2关：Create/Drop/ALTER 索引
[Hadoop高可用集群]数仓工具之Hive的安装部署（超级详细，适用于初学者）
Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。最初，Hive是由Facebook开发，后来由Apache软件基金会开发，并作为进一步将它作为名义下Apache Hive为一个开
源码解析FlinkKafkaConsumer支持punctuated水位线发送
Punctuated水位线生成源码解析
Spark任务优化分析
如果是sql 任务进入到 SQL 页面看到 对应的执行卡在哪里，然后分析，如下图是hash id、actor_name，可以看到是group by 数据有倾斜。group by 数据倾斜问题，可以参考hive group by 数据倾斜问题同样处理思路。首先需要掌握 Spark DAG、stage、
人工智能将对我们的未来产生什么影响？
作者：禅与计算机程序设计艺术 1.简介随着科技的飞速发展，人工智能（AI）作为新兴的产业正在引领着整个行业的变革。从“视觉”到“聊天”，再到“自主驾驶”，人工智能已经成为日益重要的市场。那么，在过去的5年里，人工智能带来的变革有哪些呢？AI 将如何改变我们的生活
大数据智能决策系统架构：决策系统与市场营销
作者：禅与计算机程序设计艺术 1.背景介绍大数据时代已经到来了，在这个信息化时代，智能决策与市场营销变得尤其重要，基于大数据的智能决策系统对我们的生活、工作、社会、经济产生深远影响。那么如何设计一个真正具有竞争力的大数据智能决策系统架构呢？决策系统与市场营销是一
Spark运行模式介绍
Spark三种运行模式，本地运行模式，StandAlone运行模式，Spark on Yarn运行模式介绍
新创建多模块工程执行maven编译打包出现non-resolvable parent pom异常
新创建多模块工程执行maven编译打包出现non-resolvable parent pom异常
云计算与大数据实验七 HBase的安装与基本操作
非常消耗资源，所以你在长时间没使用命令行后台会回收资源，如果你想保持环境不被注销，请在弹出延时窗口时点击延时，并且保持操作命令行，这样可以保持你的环境一直持续。要新建一个表，首先必须要给它起个名字，并为其定义模式，一个表的模式包含表的属性和列族的列表。的安装也分为三种，单机版、伪分布式、分布式；当然
【基础篇】三、Flink集群角色、系统架构以及作业提交流程
TaskManager是Flink中的工作进程，数据流的具体计算就是它来做的。需要注意在早期版本的Flink中，没有JobMaster的概念，而JobManager的概念范围较小，实际指的就是现在所说的JobMaster。这里的ResourceManager是Flink内置的资源管理组件，和其他资源
头歌大数据——MapReduce综合应用案例 — 电信数据清洗 答案 无解析
Tips：本关需要补充三个文件的代码～如下图所示，点击小三角切换文件～根据提示，在右侧编辑器补充代码，对数据按照一定规则进行清洗。记得启动HDFS～～
Flink学习之旅：（三）Flink源算子（数据源）
大多数情况下，前面几个数据源已经满足需求了。但是遇到特殊情况我们需要自定义的数据源。实现方式如下：1.编辑自定义源Source/***//**** 主要实现2个方法 run() 和 cancel()*/// 声明一个布尔变量，作为控制数据生成的标识位@Override// 在指定的数据集中随机选取数
关于ES集群规模规划
在搭建正式的生产集群之前，充分做好硬件和服务器配置以及集群规划是重中之重，磨刀不误砍柴工。
【大数据】Kafka 入门简介
Partition 中的消息序列是有序的消息序列。Kafka 在 Partition 使用偏移量（Offset）来指定消息的位置。一个 Topic 的一个 Partition 只能被一个 Consumer Group 中的一个 Consumer 消费，同组的多个 Consumer 消费同一个 Par
Flink实现kafka到kafka、kafka到doris的精准一次消费
【代码】Flink实现kafka到kafka、kafka到doris的精准一次消费。
Flink之常用处理函数
处理函数Processing Function是Apache Flink中用于对数据流上的元素进行处理的核心组件之一。处理函数负责定义数据流上的数据如何被处理，允许开发人员编写自定义逻辑以执行各种操作，如转换、聚合、筛选、连接等，并在处理后生成输出数据流。
大数据毕设项目 大数据电影数据分析与可视化系统 - python Django
🔥 这两年开始毕业设计和毕业答辩的要求和难度不断提升，传统的毕设题目缺少创新和亮点，往往达不到毕业答辩的要求，这两年不断有学弟学妹告诉学长自己做的项目系统达不到老师的要求。为了大家能够顺利以及最少的精力通过毕设，学长分享优质毕业设计项目，今天要分享的是🚩 **基于大数据的电影数据分析与可视化系
