数据治理：数据治理框架和标准
本文概述的是国内外的主流的数据治理框架和标准，作为指导学习，当然不同企业仍然是根据企业自身情况参考。而DCMM数据能力成熟度这个是每个数据处理企业比定的级，也是企业数据成熟度能力的一个参考项，越来越多的企业合作伙伴重视此项评级。国际上，主流的数据治理框架主要有：ISO数据治理标准、GDI数据治理框架
Kafka使用总结
注意：本文参考Kafka英文官方文档中文参数。
什么是数字化供应链，一文给你讲清！
其实数字化供应链是一个很简单的概念，今天就一篇文章给你讲明白！
Java 20 超神版正式发布，展示了 Java 技术的最新进展
最新版本的 Java 引入了一个新的 API，它被称为外部函数和内存 API（Foreign Function & Memory API），现在进入了第二个预览阶段。向量 API 为表达向量计算而生，通过使用它，我们可以在运行时编译为支持的 CPU 架构上的最佳向量指令，从而实现比等效标量计算更高的
SparkCore对学生成绩的统计案例
SparkCore对学生成绩的统计案例根据数据文件对数据进行分析，完成如下功能：（1）查询学生成绩表中的前5名；（2）输出单科成绩为100分的学生ID；（3）输出每位学生所有科目的总成绩。
工业4.0通信协议学习之Hermes
随着大数据和工业4.0的发展，对于设备生产商而言，所生产的设备需要支持各种通信协议，因此，设备开发的软件工程师也需要学习各种通信协议。本文用于记录Hermes协议的学习。
DBT工具简介
dbt（数据构建工具）使具有数据分析师技能的人可以使用简单的选择语句来转换仓库中的数据，从而有效地使用代码创建整个转换过程。1、更低的学习成本、更快的响应速度：任何知道如何编写 SQL SELECT 语句的人都可以构建模型、编写测试和安排作业，以生成可靠、可操作的数据集以进行分析。2、更加规范的流程
【大数据入门核心技术-Flume】（四）使用Flume采集数据到Hive
rw-r--r--. 1 testuser supergroup 2747878 9月 10 2019 /usr/local/hadoop-3.2.1/share/hadoop/common/lib/guava-27.0-jre.jar。-rw-r--r--. 1 root root 164820
HBASE API 操作
1、idea创建一个maven项目2、添加相关依赖（HBASE客户端（最主要）、服务端），pom.xml
Python之Kafka安装与使用
目录一、kafka基础概念了解二、下载安装Kafka三、KafkaTool可视化工具四、python操作kafka1、生产者代码2、消费者代码一、kafka基础概念了解Kafka是一种高吞吐量、持久性、分布式的发布订阅的消息队列系统kafka文档为什么应该学习 KafkaKafka 里面的信息是如何
Hbase 查询命令 条件筛选
Hbase 查询命令 条件筛选
云计算与大数据第6章 云计算节能技术题库及答案
绿色计算涉及系统结构、系统软件、并行分布式计算及计算机网络，以保证计算系统的高效、可靠及提供普适化服务为前提，以计算系统的低能耗为目标，强调采用高效节能的CPU、服务器和外围设备，是面向新型计算机体系结构和包括云计算在内的新型计算模型，通过构建能耗感知的计算系统、网络互联环境和计算服务体系，为日益普
Flink开发语言使用Java还是scala合适？
可问题就是先它一步的spark，已经早在2010年对外开源发布得到了很多的代码贡献，更是在2012年的时候就发布了0.6的第一个正式版，我们都知道一个道理，一步快步步快，所以spark在第一个正式版本发出以后，进入了更快的发展，2013年的时候成为了Apache基金会下的项目，并在同年研发出了机器学
天猫数据分析：2023年速食品（方便面）市场数据分析
近年来，随着中国经济的发展，消费者对方便面的需求量和要求也在不断变化，因此，我国方便面市场的规模和消费者的需求环境也正在不断改变。从消费端角度来看，随着居民人均可支配收入的增加，人们的消费需求也更加多元化，对食品的要求已经从吃得饱转变为吃的好，更要吃得健康。因此，传统的方便食品企业需要不断地去研究新
Flink 实时数仓 (一) --------- 数据采集层
Flink 实时数仓数据采集层
Hadoop HDFS的特点与优缺点
Hadoop HDFS的特点与优缺点
hadoop开启后jps只有jps一个进程
问题描述：开启hadoop后，查看jps,显示只有jps一个进程：解决方法：1.没有配置SSH免密码登录参考博客：https://www.cnblogs.com/thousfeet/p/8618696.html 出事点5之前已经创建了密钥，直接复制进来。ssh本机ip，配置成功2. 重新启动hado
大数据技术(入门篇) --- 使用 Spring Boot 操作 CDH6.2.0 Hadoop
本人是web后端研发，习惯使用spring boot 相关框架，因此技术选型直接使用的是spring boot，目前并未使用 spring-data-hadoop 依赖，因为这个依赖已经在 2019 年终止了，可以点击查看 ，所以我这里使用的是自己找的依赖，Hadoop是一个由Apache基金会所开
毕业设计-基于大数据的房地产数据分析与预测-python
毕业设计-基于大数据的房地产数据分析与预测-python:房地产业作为对国民经济和城市经济发展 具有重大影响的产业部门，在发展中面临诸多 问题，需要政府及有关部门在对房地产市场发 展进行正确预判的基础上科学决策、积极引导， 促进房地产业的健康发展。房地产市场拥有着海 量的数据积累，房地产市场分析都将
绿色的工厂认证条件
（6）可作为绿色准入条件的通行证：如：获得绿色工厂或绿色产品的企业可以优先获得在京东、国美、居然之家、能效标识平台、水效标识平台等平台进行宣传推广的机会，并提供给政府有关部门作为《绿色发展指标体系》中绿色产品市场占有率指标的统计参考。5、环境排放情况，大气、水体污染物、固体废弃物、噪声、温室气体的排
