百战c++（数据库2）
写满了：redo log 里的容量是有限的，如果数据库一直很忙，更新又很频繁，这个时候 redo log 很快就会被写满了，这个时候就没办法等到空闲的时候再把数据同步到磁盘的，只能暂停其他操作，全身心来把数据同步到磁盘中去的，而这个时候，就会导致我们平时正常的SQL语句突然执行的很慢，所以说，数据库
大数据Presto（二）：Presto安装搭建
注意：--server执行连接Presto的coordinator节点，--catalog指定连接hive，这里写的名字和“/software/presto-0.259/etc/catalog”路径中配置的properties名称保持一致。分别在node3,node4,node5节点上启动Prest
学习笔记：深入理解MapReduce
为什么是MapReduce? MapReduce流程介绍，MapReduce中的shuffle洗牌机制。的作用与理解。
大数据Presto（一）：Presto介绍
一、Presto出现背景Presto是Facebook在2012年开发的，是专为Hadoop打造的一款数据仓库工具。在早期Facebook依赖Hive做数据分析，Hive底层依赖MapReduce，随着数据量越来越大，使用Hive进行数据分析，时间可能需要分钟级到小时级别
【Zookeeper技术栈篇】高频面试点
Zookeeper的选举过程， Zookeeper的角色， Zookeeper的核心， Zab原理，Zookeeper的读写请求
CDH大数据平台 14Cloudera Manager Console之flume安装和配置(markdown新版)
flume配置，数仓必备采集数据工具
MapReduce课程设计 好友推荐功能
好友推荐算法在实际的社交环境中应用较多，比如qq软件中的“你可能认识的好友° 或者Facebook中的好友推介。好友推荐功能简单的说是这样一个需求，预测菜两个人是否认识，并推荐为好友，并且某两个非好友的用户，他们的共同好友越多。那么他们越可能认识。
【Flink】flink的安装部署（1）
Flink集群的搭建，local，standalone，flink on yarn。
【Flink】flink入门案例（2）
flink入门案例，flink wordcount单词计数
Hadoop大数据平台搭建环境 提供虚拟机相关配置
我把已经搭建好的虚拟机环境放在了百度网盘上，需要的同学自取即可。
大数据面试之flume重点
大数据面试之flume重点
【精通Spark系列】弹性分布式数据集RDD快速入门篇
本篇文章属于Spark系列文章，专栏将会记录从spark基础到进阶的内容，，内容涉及到Spark的入门集群搭建，核心组件，RDD，算子的使用，底层原理，SparkCore，SparkSQL，SparkStreaming等，
大数据趣味学习探讨（三）：怎么确定学习目标
战点就是战斗的机会根本轮不到你奋斗有一个真相，年轻人必须明白，而且越早明白越好，那就是拼命不可怕，加班不可怕，辛苦也不可怕，真正可怕的是根本轮不到你去拼命。肩膀脱臼不可怕，绷带上场不可怕，单场跑动16公里也不可怕，真正可怕的是直到哨声响起，你都没有等到一次上场的机会啊。你准备了一辈子，却发现根本没有
[平台运维、Hadoop]Spark Streaming 实时计算框架
在大数据技术中,有离线计算、批量计算、实时计算以及流式计算，其中，离线计算和实时计算指的是数据处理的延迟;批量计算和流式计算指的是数据处理的方式。Spark Streming是构建在Spark上的实时计算框架，且是对Sparks Core API的一个扩展,它能够实现对流数据进行实时处理，并具有很好
【大数据】Hadoop在呼唤Hive（附一键部署Hive脚本）
汝之观览，吾之幸也！本文主要讲解Hive部署到Hadoop集群并使用，结尾附一键部署Hive脚本
大数据趣味学习探讨（二）：我是怎么坚持学习的
2.1、调研日前，北京大数据研究院联合大数据分析与应用技术国家工程实验室、北京治数科技有限公司共同发布了《2022年中国大数据产业发展指数报告》。研究团队在2020年、2021年连续发布大数据产业发展指数的基础上，深入调研了各地大数据政策环境、大数据产业和企业发展状况，基于自身企业库中收录的 747
Hadoop集群完全分布式搭建
hadoop集群分布式的搭建
从商业化部门架构看 广告产品经理知识框架
商业产品技术部共有7个小组，除去产品和测试，剩下的5个技术小组分别负责商家平台、前端页面、工程、策略和广告外投也就是联盟。下面我们再分别看一下各个小组所负责的事情和职责是什么。
大数据开发工程师是做什么的？岗位要求高吗？
大数据开发工程师是做什么的？岗位要求高吗？大数据开发工程师要负责数据仓库建设、ETL开发、数据分析、数据指标统计、大数据实时计算平台及业务开发、平台建设及维护等工作内容。熟练掌握数据仓库、hadoop生态体系、计算及二次开发、大数据平台工具的开发：开发平台、调度系统、元数据平台等工具，该岗位对于技术
