对比flink cdc和canal获取mysql binlog优缺点
Flink CDC和Canal都是用于获取MySQL binlog的工具，但是有以下几点优缺点对比：
spark读取hive表字段，区分大小写问题
spark任务读取hive表，查询字段为小写，但Hive表字段为大写，无法读取数据。
How AI is changing Big Data and Business
作者：禅与计算机程序设计艺术 1.简介随着人工智能的不断进步、计算机算力的不断提高，以及基于云计算平台的大数据产生的越来越多的数据，人工智能已成为经济界和产业界的一股重要力量。而人工智能究竟能给企业带来哪些新的机遇和变化，如何运用人工智能为企业提供更好的服务？本
hudi搭建【大数据比赛长期更新】
hudi搭建题目分析本任务需要使用root用户完成相关配置，具体要求如下：1、 从宿主机/opt目录下将maven相关安装包复制到容器Master中的/opt/software（若路径不存在，则需新建）中，将maven相关安装包解压到/opt/module/目录下（若路径不存在，则需新建）并配置ma
AI + 零售: 零售的进化：四次业态革命
根据德勤（Deloitte）发布的《2018年度全球零售商力量报告》，中国大陆仅有10家企业跻身世界最大的250家零售商之列，远少于美国的80家，日本的32家，也不及德国的17家，法国和英国的12家。经过20多年的高歌猛进，电子商务已成为一种重要的商业组织方式，成为最耀眼的零售业态，2017年我国电
Hive 建表客户端报错 missing EOF at “/“
后来把sql中的注释去掉以后，或者把注释开头替换成 – 此异常便可以解决。在创建表时，我使用的是idea客户端，报了如下错误。
HDFS读写流程详细过程
HDFS详细的读写流程，edit和fsimage文件的更新，WAL技术
Hadoop启动关闭命令
注意：第一次启动集群之前需要格式化
Hadoop理论及实践-HDFS的Namenode及Datanode（参考Hadoop官网）
本篇博客参照hadoop官网，介绍HDFS的NN及DN，副本存放机制（机架感知策略），安全模式，文件系统元数据持久化（editlog,fsimage）,HDFS健壮性，数据组织及存储空间的回收，重点介绍DataNode及NameNode及机架感知策略
An Introduction to Hadoop Streaming API in Big Data
Hadoop Streaming 是 Hadoop 的一个子项目，它可以让用户在 Hadoop 上运行离线批处理作业或实时流处理作业。其主要工作原理是从标准输入（stdin）读取数据，对其进行处理，然后输出到标准输出（stdout）。Hadoop Streaming 的计算模型是 MapReduce
人工智能将成为发展中国家的重要支柱产业。
作者：禅与计算机程序设计艺术 1.简介人工智能（Artificial Intelligence，AI）已经成为当今世界热门话题之一。它诞生于上世纪60年代，最早的相关研究者是卡内基梅隆大学（CMU）的Paul McCann和他的同事们。至今已发展成一个独立、系统
如何启动和关闭分布式集群
本文介绍如何启动和关闭一个包含hadoop、zookeeper、hbase和spark的分布式集群。
【项目实战】Dbeaver使用Apache Phoenix来实现连接Hbase的详细指引
DBeaver是一款开源的数据库管理工具，可以连接多种类型的数据库，包括Apache Phoenix和Hbase。通过DBeaver连接Hbase表，可以更方便地进行数据管理和查询。
HBase深度解析：HBase在大数据应用中的角色
Apache HBase是一个开源的分布式数据库系统，能够处理超大量的数据。相对于关系型数据库，HBase提供更高的容错性、可扩展性和高性能。本文将从HBase的历史和特性出发，到其最新版本中所增加的新功能以及其在大数据应用中的作用。Apache HBase是一个分布式的、面向列的、可伸缩的存储系统
数据科学家对AI和机器学习的认知
作者：禅与计算机程序设计艺术 1.简介数据科学家的角色如今已经越来越重要，越来越多的人选择从事这一职业。尽管数据科学家可能并不一定会涉及到所有具体的机器学习或深度学习技术，但他们肩负着许多核心责任，包括收集、分析、理解和处理海量数据、设计并实施有效的数据科学方法
【ElasticSearch】ELK简介
Elasticsearch 是一个分布式、RESTful 风格的搜索和数据分析引擎，能够解决不断涌现出的各种用例。作为 Elastic Stack 的核心，Elasticsearch 会集中存储您的数据，让您飞快完成搜索，微调相关性，进行强大的分析，并轻松缩放规模。ElasticSearch官网。
大数据智能决策系统架构：数据收集与预处理
作者：禅与计算机程序设计艺术 1.简介一、引言随着互联网、大数据、云计算的发展，越来越多的人能够接受并依赖于网络服务。但是，如何有效地利用这些数据进行智能决策，成为各个企业面临的重大课题。如何从海量的数据中提取有效信息，对企业管理具有重要意义。如何将海量的、复杂
定义现代化实时数据仓库，SelectDB 全新产品形态全面发布
*导读：**9 月 25 日，2023 飞轮科技产品发布会在线上正式召开，本次产品发布会以为主题，飞轮科技 CEO 马如悦全面解析了现代化数据仓库的演进趋势，。飞轮科技联合创始人兼 COO 连林江介绍了基于 SelectDB 的多个场景解决方案以及生态合作模式，来自同盾科技、趣丸科技以及观测云的多位
架构师必知必会系列：人工智能与机器学习架构
作者：禅与计算机程序设计艺术 1.简介机器学习(ML)是一个正在蓬勃发展的新领域，它可以用来解决复杂的问题、提升产品的性能、改善用户体验等方面的应用场景。随着机器学习技术的不断进步，越来越多的公司和个人将人工智能（AI）技术纳入到自己的产品或服务中，实现更加智能
【HDFS】hdfs的count命令的参数详解
【HDFS】hdfs的count命令的参数详解
