大数据实验 实验四：NoSQL 和关系数据库的操作比较
大数据实验 实验四：NoSQL 和关系数据库的操作比较
Hadoop 安装及目录结构
【1】 各个服务组件逐一启动/停止#分别启动/停止HDFS组件#启动/停止YARN【2】各个模块分开启动/停止（配置ssh是前提）#整体启动/停止HDFS start-dfs.sh/stop-dfs.sh #整体启动/停止YARN start-yarn.sh/stop-yarn.sh。
【postgresql初级使用】可以存储数据的视图-物化视图，加速大数据下的查询分析
本节主要分享物化视图(materialize view)的基础知识，分为原理机制，创建，数据刷新，以及删除等小节。在原理机制一节，会与普通view对比不同点，它们执行机制的差异；之后的各小节结合案例分享语法与使用场景。
【大数据】计算引擎MapReduce
十分钟，一文，MapReduce核心概念、原理快速入门。
【大数据】HDFS、HBase操作教程（含指令和JAVA API）
详解HDFS和HBASE的指令操作以及JAVA API。
机器学习在安全领域的应用：从大数据中识别潜在安全威胁
当谈到机器学习在安全领域的应用时，不可否认其在提升安全保障能力方面的重要性。机器学习技术的迅猛发展和不断完善，为威胁检测、视频监控和自然语言处理等安全领域带来了前所未有的机遇和挑战。本博客将深入探讨机器学习在安全领域的广泛应用，以及其对安全保障能力的提升。在过去的几年中，安全风险与威胁不断增加，传统
HBase Java API开发：表的扫描与扫描的缓存和批量处理
在右侧编辑器begin-end处编写代码补全tablename为待操作表的表名，要求实现如下操作：删除表中行键为row1row2的行；获取表中行键为row3row10的行；四个操作需要依照以上先后顺序，即先删除在获取row3，row10。不需要你直接输出，只需要将批量操作的返回即可。
海豚调度系列之：任务类型——Flink节点
本案例为大数据生态中常见的入门案例，常应用于 MapReduce、Flink、Spark 等计算框架。主要为统计输入的文本中，相同的单词的数量有多少。若生产环境中要是使用到 flink 任务类型，则需要先配置好所需的环境。在使用 Flink 任务节点时，需要利用资源中心上传执行程序的 jar 包。F
Spark01 —— Spark基础
Spark基础为什么选择Spark?Spark基础配置Spark WordCount实例Spark运行架构Spark分区Spark算子Spark优化
Flink窗口理论到实践 | 大数据技术
⭐⭐个人主页🔎哆啦A梦撩代码🎉欢迎关注🔎👍⭐️留言📝
踏入大数据的第一天，我先入入门
【转行原因】目前数据每天已亿计算，作为 Java程序员的我已经无法使用常规工具对数据进行捕捉、管理和处理这些数据集合。MySQL的存储容量也只有500-1000行数据。而且数据每天还在告诉增长，还不带重样的。还有就是跟着党走，我要搞新基建。所以我来了，我来了,我踏着七彩祥云走来了…按顺序给出存储单位
车联网大数据与人工智能一体化：开启智慧出行新时代
车联网通过将车辆与互联网相连，实现了车辆信息的采集、传输和处理，为用户提供了更加智能、便捷的出行服务。而大数据和人工智能作为车联网的核心技术，为车辆数据的分析和利用提供了重要支撑，可以帮助实现智能驾驶、智慧交通等多种应用场景。
【大数据】LSM树，专为海量数据读写而生的数据结构
一文详聊LSM树这种专为海量数据读写而生的数据结构
2024统计建模：大数据与人工智能时代的统计研究
大数据与人工智能时代的统计研究
智慧交通系统：安全保障与便利出行
智能交通管理系统利用先进的技术手段，例如交通信号控制、车辆检测等，实现对交通流量的实时监测和控制，从而优化交通流动，减少交通堵塞和事故发生的可能性。此外，智慧交通系统还涉及到了智能车辆和智能交通设施的开发和应用。智能交通设施则包括智能交通标志、智能停车管理系统等，它们能够通过无线传感器和通信技术，实
大数据中的项目数据采集
官网：DataX 是阿里云的开源版本，在阿里巴巴集团内被广泛使用的离线数据同步工具/平台。DataX 实现了包括 MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)
【Hadoop】DataNode 数据盘进行磁盘DiskBalancer
DiskBalancer是一个命令行工具，可在DataNode的所有磁盘上均匀分发数据。 此工具对给定的DataNode进行操作，并将块从一个磁盘移动到当前DataNode的另一个磁盘。DiskBalancer通过创建计划并继续在DataNode上执行该计划。 计划是一组陈述，描述了两个磁盘之间应该
数据湖技术选型——Flink+Paimon 方向
本文结合 Flink 对几大数据湖选型进行了对比，最终选择使用 Flink + Paimon 技术栈。
Seal^_^【送书活动第2期】——《Flink入门与实战》
Seal^_^【送书活动第2期】——《Flink入门与实战》
HBase 基础结构
HBase 是一个分布式[集群]、可扩展[动态上下线]、支持海量存储的 NoSQL 数据库。相当于 BigTable，负责海量数据的存储。如果数据量小的时候不适合使用 HBase，因为生产上需要不断的切分和合并比较消耗资源。如果数据量比较大，可以做到几十亿条数据秒级查询。支持数据的增删改查，实现了
