Hadoop之MapReduce概述
Hadoop之mapreduce概述，描述相关工作机制和原理
大数据Doris（五十二）：Doris数据导出案例和注意事项
与导出到HDFS不同的是导入到本地的目录需要预先创建出来，然后执行导出数据命令即可，这里说的本地是指BE节点，指定对应导出命令时不一定是在哪个BE节点进行导出，所以这里我们在所有BE节点创建导出路径。这里同样对Doris表"export_tbl"进行导出，这里将表中数据导出到BE节点的"/home/
链路聚合介绍及其配置命令
SW1-GigabitEthernet0/0/22]lacp priority 50000 //设置接口 LACP 优先级，默认 32768，值越小，优先级越高[SW1-GigabitEthernet0/0/22]quit。[SW1-Eth-Trunk1]trunkport GigabitEther
指标与标签的区别？
在公司数据建设过程中，经常会使用和提到指标和标签，但是很多小伙伴对于两者的区别确不能讲清楚。实际上标签与指标一样，是理解数据的两种方式，在赋能业务上，两者同样重要。接下来将结合自身的理解，从定义、应用场景、分类等多个方面进行总结。
解决：pycharm绘制词云-中文会被显示成方框乱码
wordcloud默认是不支持显示中文字符的，中文会被显示成方框。可以尝试更改WordCloud的字体参数，以便正常显示中文字符。同上，wordcloud默认是不支持显示中文字符的，中文会被显示成方框。但是标题需要另外设置。修改后词云正常显示，但标题为方框乱码。
Hbase
Hbase 的扩展性主要体现在两个方面，一个是基于运算能力（RegionServer） 的扩展，通过增加 RegionSever 节点的数量，提升 Hbase 上层的处理能力；HBase擅长于存储结构简单的海量数据但索引能力有限，而Oracle，mysql等传统关系型数据库(RDBMS)能够提供丰富
密码学新进展：基于同态加密的数据保护是否会成为未来的趋势？
同态加密技术可以对数据进行加密保护，同时又能够在不暴露数据内容的前提下对其进行计算和处理，这为保护数据隐私和安全提供了新的思路和解决方案。此外，同态加密技术还可以实现数据共享，如在医疗保健领域中，医疗机构可以通过同态加密技术实现医疗数据的共享和分析，同时又不会泄露患者的隐私信息。例如，在医疗保健领域
大数据Doris（三十二）：HDFS Load和Spark Load的基本原理
因为 Doris 表里的数据是有序的，所以 Broker load 在导入数据的时是要利用doris 集群资源对数据进行排序，对 Doris 的集群资源占用要比较大。Spark load 是利用了 spark 集群的资源对要导入的数据的进行了排序，Doris be 直接写文件，这样能大大降低 Dor
hive分区表之insert overwrite 注意事项
比如跑上月的数据最开始有44条记录，后面业务说不对，应该一条都没有的，结果你重跑了，确实跑出了0条记录，但是你插入的时候就是不能覆盖。所以这里有个注意事项！如果我们建立了一个分区表，如果每个月都要更新数据，不要因为省事就是用动态分区插入。但是今天遇到一个问题，如果我查询的数据=0，那么数据还会覆盖么
Elasticsearch在后台启动
Elasticsearch在linux下使用命令sh elasticsearch start，按键ctrl+c的时候程序就会stop掉，如何将程序在后台启动呢？这时执行的时候会出现没有权限./elasticsearch: Permission denied。需要授权执行命令:chmod +x bin
【Spark】Spark的常用算子
使用给定的函数对 RDD 的元素进行聚合，seqOp 计算在分区中初始值到中间结果的聚合计算，而 combOp 在节点上对中间结果进行聚合。: 返回对输入 RDD 和参数 RDD 执行联合操作的结果，生成一个新的 RDD，不去重。: 返回对输入 RDD 和参数 RDD 执行交集操作的结果，生成一个新
Java：java -jar命令讲解
1.当前ssh窗口被锁定，可按CTRL+C打断程序运行，或直接关闭窗口，程序退出。2.当前ssh窗口不被锁定，但是当窗口关闭时，程序中止运行。5.启动jar包或war包时，配置静态变量。4.输出重定向到temp.file文件。3.当窗口关闭时，程序也不会中止运行。...
Hadoop启动正常，能ping通，无法打开hadoop102:9870
浏览器无法打开hadoop102:9870。
大数据技术原理与应用（第3版）期末复习
HDFS文件操作MapReduce程序HBase数据库命令操作。
Spark创建Hive表
实习生带着一脸坚毅的神情，斩钉截铁的告诉我：我：你怎么创建的？实习生：就下面一个简单的sql语句啊id int,""")我：你需要对Spark和Hive的基础知识进行巩固。
免费版的mqtt服务器（EMQX 开源版）
自己搭建免费版的mqtt服务器
大数据Doris（二十六）：Broker Load基本原理和语法介绍
使用Broker Load导入数据时，用户在提交导入任务后，FE 会生成对应的 Plan 并根据目前 BE 的个数和文件的大小，将 Plan 分给 多个 BE 执行，每个 BE 执行一部分导入数据。MERGE 和 DELETE 类型仅适用于 Unique Key 模型表，其中 MERGE 类型需要配
Nature子刊 | 周集中团队揭示长期气候变暖导致草地土壤微生物多样性降低
题目：Reduction of microbial diversity in grassland soil is driven by long-term climate warming发表杂志：Nature Microbiology发表年月：2022年6月第一作者：吴林蔚、Zhang Ya、郭雪通讯
PySpark环境配置
首先，要知道PySpark是Spark为Python提供的API库，因此使用`pip install pyspark`下载pyspark不等于下载了spark。因此，配置pyspark环境，首先需要下载spark。（2）spark运行环境需要java，因此需要下载java。使用`pyspark`打开
