记录使用helm安装dolphinscheduler后使用“资源中心”,提示“存储未启用”
解决使用helm部署dolphinscheduler到k8s中,使用“资源中心”时,提示“存储未启用”
【维度建模】维度模型设计详细步骤
数据仓库建设过程中,维度建模的详细步骤和要注意的点
IDEA连接hadoop hdfs
进入一下界面, 搜索 重启IDEA 首先保证浏览器可以访问到 按照下述步骤创建一个HDFS连接 点击出现报错,点击哪个报错的链接 https://cwiki.apache.org/confluence/display/HADOOP2/WindowsProblems 点击之后出现如下界面,点击 下
Filebeat+Kafka+ELK日志采集(二)——Filebeat
Filebeat用于日志采集,将采集的日志做简单处理(多行合并)发送至Kafka、Logstash、Elasticsearch等。
研究生往边缘计算方向走,需要哪些基础?
近期很多朋友在边缘计算社区后台留言咨询研究生往边缘计算方向走,该做那些准备之类的问题,然而一百个人有一百种想法,大家看法都不一样。为此,我们邀请国内比较活跃的几个边缘计算相关高校团队来一起回答这些问题。问题主要有三个:① 研究生往边缘计算方向走,需要哪些基础?② 如何开展边缘计算的研究?③ 咱们学校
habase安装配置
1、上传2、hbase文件配置1)在27行增加java的安装路径(jdk路径)(27行)2)把文件46和47行的permSize注释掉(46和47行)3)在120行设置HBASE_PID_DIR的路径(120行)4)在128行设置 HBASE_MANAGES_ZK的值(128行)5)配
hadoop、hbase、zookeeper集成kerberos认证
完整的kerberos认证过程!
Hadoop生产调优之HDFS-核心参数
NameNode 内存生产环境配置,NameNode心跳并发配置,开启回收站配置
Spring整合Kafka
Apache Kafka发源于LinkedIn,于2011年成为Apache的孵化项目,随后于2012年成为Apache的主要项目之一。-Kafka使用Scala和Java进行编写。Apache Kafka是一个快速、可扩展的、高吞吐、可容错的分布式发布订阅消息系统。Kafka具有高吞吐量、内置分区
大数据技术体系(长期更新)
2018~2021 年期间,笔者阅读了200+大数据相关的书籍和专栏。本专栏为笔者,在多年读书笔记的基础上,结合自身的大数据开发心得体会,呕心沥血之作。
matlab 朴素贝叶斯模型 代码及其案例
matlab 还原 朴素贝叶斯分类器(Naive Bayes Classifier 或 NBC) 机器学习
StarRocks 集群安装部署文档
本文是包括大数据集群服务器一般配置步骤、mysql5.7安装部署、starrocks HA 集群安装部署、datax+datax-web安装部署
大数据就业生就业信息分析可视化
摘 要本文利用Hadoop+Hive技术分析就业生毕业后就业信息,对所包含职业、岗位、薪资、所在城市、行业类别等数据信息进行模拟,分析与处理,提取出匹配到的目标数据并将其归类化处理.得出各大城市就业生就业情况数据,为大数据时代应聘人员及高校制定人才培养方案提供数据参考.关键词:就业;就业生;大数据第
MySql查看连接
MySql查看连接
HDFS的API操作 (Eclipse版)
HDFS的API客户端操作,基本环境配置,hdfs文件上传下载删除更名等操作,以及hdfs的I/O流操作!!!
Oracle MySQL Hive sql判断数字、日期是否连续 row_number()over() 窗口函数
注:本人数据库使用的是mysql 8.0.30版本,row_number()over()窗口函数在MySQL 8以下是没有的,没有MySQL高版本的,也可以用Hive和Oracle测试,HIve、Oracle和此教程sql大同小异准备了两组数据,每人持有四个数字和四个日期,找出四个数字连续的和日期连
基于WSL2在Windows 2022部署Docker应用
很多教程要装什么HyperV,其实不用,这个WSL 2就是代替原来虚拟机的,是一个正宗的Linux Container,用HyperV的叫Windows Contariner,这个可以在Docker Desktop右下角图标右击的时候切换,但我们不要切换,保持在Linux Container即WSL
Doris最全使用手册
doris常用的理论基础
【图文教程】Centos 7下安装Hadoop
比如凯哥的安装目录,就是第一步上传到/data后解压的。所以hadoop安装目录就是:/data/hadoop-2.7.7 这个别搞错了。2.1:修改hadoop安装目录 /etc/hadoop 下的 hadoop-env.sh的内容。2.4:修改 hadoop安装目录下的/etc/hadoop 下
多旅行商问题——公式和求解过程概述
英文:The multiple traveling salesman problem an overview of formulations and solution procedures摘要:多旅行商问题(mTSP)是著名旅行商问题(TSP)的推广,其中允许在解中使用多个旅行商。此外,MTSP的特