2022年区块链白皮书详解及内容分享
区块链发展白皮书深入的总结的近些年区块量的发展，明确了区块链是构建信任的基石，是实现信用传递，价值传递的可信网络。区块链聚焦构建安全、可靠的区块链基础设施，让企业、政府快速、高效的搭建区块链网络及行业应用，实现资金流、物流、信息流的可信快速流动，高效可信协同，助力降低协作成本，提升效率；
使用人工智能和传感器技术，结合观测数据，实时获取自然界中变化的事件并进行分析预测。
作者：禅与计算机程序设计艺术 1.简介随着全球数字化转型，物联网、智慧城市、智能农业、智能医疗等新兴产业正在改变世界，传感器网络已经成为连接各类传感器设备的基础设施。而人工智能也逐渐成为各行各业的基础性科技工具，在对环境的高速采集、实时的计算、及其规模化的应用方
【安全系列】OpenStack云平台入侵检测系统的设计与实践
OpenStack（Open Source Cloud Operating System）是一个开源的云计算平台即服务（Cloud OS），基于Apache软件基金会、Mirantis公司开发的一种私有云解决方案。它提供了一套完整的基础设施，包括计算、网络、存储、负载均衡等资源管理能力。用户可以方便
京东数据分析（京东大数据）：2023年10月京东手机行业品牌销售排行榜
热销TOP10商品榜单中均为苹果品牌商品，其中，50%的商品为Apple iPhone 15系列，30%的商品为Apple iPhone 13系列，Apple iPhone 14系列商品占比为20%。根据鲸参谋平台的数据显示，今年10月份，京东平台手机行业的销量约340万，环比增长约11%，同比则下
【漫画可视化大屏系统】基于Spark的国漫推荐系统源码
然而，面对海量的国漫资源，用户往往难以找到自己真正感兴趣的作品。本课题旨在设计和实现一个基于Spark的国漫推荐系统，通过运用大数据处理技术和机器学习算法，为用户提供个性化的国漫推荐，从而提高用户在观看国漫时的体验。3. 丰富推荐系统研究：基于Spark的国漫推荐系统将进一步完善推荐系统领域的研究，
【ES】Elasticsearch-深入理解索引原理
当ES启动的时候，它会使用最新的commit point从磁盘恢复所有已有的segments，然后将重现所有在translog里面的操作来添加更新，这些更新发生在最新的一次commit的记录之后还未被fsync。2.每隔一段时间，buffer将会被提交： 一个新的segment(一个额外的新的倒序索
大数据-玩转数据-Flume
Flume提供一个分布式的，可靠的，对大数据量的日志进行高效收集、聚集、移动的服务，Flume只能在Unix环境下运行。Flume基于流式架构，容错性强，也很灵活简单。Flume、Kafka用来实时进行数据收集，Spark、Flink用来实时处理数据，impala用来实时查询。
【大数据】Hadoop_MapReduce➕实操（附详细代码）
MapReduce是hadoop的核心组件之一，hadoop要分布式包括两部分，一是分布式文件系统hdfs，一是分布式计算框，就是mapreduce，二者缺一不可，也就是说，可以通过mapreduce很容易在hadoop平台上进行分布式的计算编程sftp命令：Windows下登录Hadoop102l
使用两台Centos7系统搭建Hadoop-3.1.4完全分布式集群
Hadoop是Apache旗下的一个用Java语言实现开源软件框架，是一个存储和计算大规模数据的软件平台。Hadoop是Apache Lucene创始人 Doug Cutting 创建的，最早起源一个Nutch项目。2003年Google发表了一篇GFS论文，为大规模数据存储提供了可行的解决方案。2
从0到1构建智能分布式大数据爬虫系统
从0到1搭建分布式爬虫平台、深度汇总各功能模块应用
【flink】Task 故障恢复详解以及各重启策略适用场景说明
【flink】Task 故障恢复详解以及各重启策略适用场景说明
版本控制工具 - git的安装与使用
git的下载与安装、idea中git插件配置、gitlab项目拉取
【数据开发】大数据平台架构，Hive / THive介绍
什么是Hive？Hive是一个基于Hadoop的数据仓库工具。它提供了一个类似于SQL的查询语言，称为HiveQL，用于查询和分析大规模数据集。Hive将结构化数据映射到Hadoop的分布式文件系统和Hadoop的分布式处理引擎上，允许用户使用类似于SQL的语言查询数据，并将数据转换为其他格式，例如
hadoop完全分布式集群搭建（超详细）-大数据集群搭建
本次搭建完全分布式集群用到的环境有：jdk1.8.0hadoop-2.7.7本次搭建集群所需环境也给大家准备了，下载链接地址：https://share.weiyun.com/dk7WgaVk密码：553ubk本次完全分布式集群搭建需要提前建立好三台虚拟机，我分别把它们的主机名命名为:master,
HIVE数据抽样
hive中分桶其实就是根据某一个字段Hash取模，放入指定数据的桶中，比如将表table按照ID分成100个桶，其算法是hash(id) % 100，这样，hash(id) % 100 = 0的数据被放到第一个桶中，hash(id) % 100 = 1的记录被放到第二个桶中。sort by 提供了单
Hadoop的安装和使用，Windows使用shell命令简单操作HDFS
Hadoop的安装和使用，Windows使用shell命令简单操作HDFS，Hadoop是一个能够对大量数据进行分布式处理的软件框架，并且是以一种可靠、高效、可伸缩的方式进行处理的，它具有以下几个方面的特性。 高可靠性。 高效性。 高可扩展性。 高容错性。 成本低。 运行在Linux平台上。 支持多
hadoop3.3.1单机版环境搭建详细流程记录
单机版hadoop3.3.1搭建详细过程。
大数据之存算分离架构研究
随着硬件技术的快速进步，尤其是网络和存储设备的性能迅速提升，以及云计算厂商推动软硬件协同加速的云存储服务，越来越多的企业开始基于云存储来构建数据存储服务，或数据湖，因此就需要单独再建设一个独立的计算层来提供数据分析服务，这也就是存算分离架构（Disaggregated Storage and Com
Flink（七）【输出算子（Sink）】
Flink Sink输出算子
