CICFLOWMETER工具
这几天配置了CICFlowMeter工具，在配置过程中遇到很多问题。首先了解到CICFlowMeter工具有python版的，Java版的，也有直接可以编译运行版的。据说除了Java版的，剩下两个都有问题、不稳定。具体的配置过程我也是参考的别的csdn中博客以及github。换了很多版本的源代码，最
hive函数 next_day
hive函数-next_daynext_day 下周几next_day (date,char) 取当前天的下一个周一例子 select next_day(‘2021-12-30’,‘MO’);-- 2022-01-03下周一next_day(‘2020-06-14’, ‘mon’)本周一date_s
大数据分析-零基础学Tableau+超详细讲解+示例练习（四）
前文回顾：零基础学Tableau（一）：条形图、直方图绘制：传送门零基础学Tableau（二）：折线图、饼图、环形图绘制：传送门零基础学Tableau（三）：树形图、气泡图、词云图绘制：传送门
Elastic换帅，Kunlkarni接替Banon成为新任CEO
Elastic换帅！Ashutosh Kulkarni成为新一代领袖
别搞了 真卷不动了
内卷可以说是 2021 年最火的一个词了。2022 年刚开始，LZ 在很多程序员网站看到很多 Java 程序员的 2021 年度总结都是：Java 越来越卷了（手动狗头），2021 年是被卷的一年。前有几百万毕业生虎视眈眈，后有在职人员带头“摸鱼”占着坑位，加上疫情让很多公司倒闭，市面上根本没那么多
京东面试官倾囊相授：Java程序员准备面试的正确姿势
一路走来的所有个人心得都在里面了，希望能帮助各位少走弯路~
聊聊 Kafka：如何避免消费组的 Rebalance
一、前言我们上一篇聊了 Rebalance 机制，相信你对消费组的重平衡有个整体的认识。这里再简单回顾一下，Rebalance 就是让一个 Consumer Group 下所有的 Consumer 实例就如何消费订阅主题的所有分区达成共识的过程。在 Rebalance 过程中，Consumer Gr
2022DeepBrainChain双周报第103期(01.01-01.15)
合法合规地倔强生长~
大数据技术使用java实现MapReduce对文件进行切分，分类汇总
大数据技术使用java实现MapReduce对文件进行切分，分类汇总
TDengine：开源、高效的物联网大数据平台
一、物联网介绍物联网是一个非常宽泛的概念，它意味着各种设备和机器可以通过互联网进行连接并进行信息交换，主要应用在家居、医疗、交通等领域。 2021年7月13日，中国互联网协会发布了《中国互联网发展报告（2021）》，物联网市场规模高达1.7万亿元。二、主流平台1.亚马逊云科技（aws）aws物联网服
Apache 董事会即将终止 Apache Ambari 项目
2022年01月10日，来自 Cloudera 的工程师、Apache Ambari PMC 主席 Jayush Luniya 给 Ambari 社区发送了一封名为《[VOTE] Move...
Hadoop——MapReduce（3）
MapReduce：自己处理业务相关代码 + 自身的默认代码文章目录1.MapReduce优缺点2.MapReduce进程3.序列化4 InputFormat数据输入4.1 切片与MapTask并行度决定机制4.2 Job提交流程源码详解4.3 FileInputFormat 切片机制4.4 Fil
实时数仓中维度数据为什么采用HBase?
为什么不使用Redis?维度中user用户维度数据量大。为什么不适用MySQL?并发压力太大了，因为MySQL中的表本来就和用户打交道，响应用户请求，增删改查，再用它去查维度数据就没必要。初次之外还可以选择ES，这主要取决于实际场景或者架构师跟喜欢哪一种。...
springboot,vue,echart,mysql数据可视化-男女比例图-需求数据不存储在数据库中
由于自己的项目需要大数据可视化，所以就得学习，对于数据的处理就是一个难事，我在想如何对男女这个数据进行处理，因为两个数据不可能存储在数据库中，所以就需要hashmap这种形式去存储，而且男女人数是存储在另外一张表的，需要使用sql去统计出来。所以我不是从数据库中直接读取的男女总数，代码如下：后端代码
大数据Java基础DAY8（面向对象——封装）
封装封装概述 是指隐藏对象的属性和实现细节，仅对外提供公共访问方式。好处： 隐藏实现细节，提供公共的访问方式 提高了代码的复用性 提高安全性。封装原则： 将不需要对外提供的内容都隐藏起来。 把属性隐藏，提供公共方法对其访问。...
大数据Java基础DAY7（面向对象基础）
面向对象1、什么是面向对象的思想？ 面向对象的思想是基于面向过程的思想发展而来的。 面向过程：强调的是实现功能的每一个步骤 面向对象：强调的是对象，然后由这个对象去调用功能2、面向对象的特点： 1)、是一种更加符合我们现实生活习惯的思想 2)、可以将复杂的事情简单化 3)、我们从之前的参
HadoopHA 搭建
1.准备三台机器 centos7安装步骤 略（ 可以看我的 虚拟机安装 centos7 文章）2.配置免秘钥访问略（可以看我的免秘钥配置文章）3.JKD 安装1.8略4.Hadoop官网下载3.1.2网址 http://hadoop.apache.org/https://archive.apache
Hadoop HA《hadoop-Yarn》
1.Hadoop集群HA搭建可参考我的文章《Hadoop分布式搭建（一）》2.修改环境变量cd /opt/hadoop-3.1.2/etc/hadoopvi hadoop-env.shexport JAVA_HOME=/usr/lib/jvm/jdk1.8.0_111export HDFS_NAME
大数据之Javase
Java基础总结1
Python大数据-对淘宝用户的行为数据分析
数据获取本次数据是在网上获取的来源于： 数据集-阿里云天池 ，不在进行抓取或收集，大家可以看这篇文章Python爬虫-抓取数据到可视化全流程的实现，详细的写了数据抓取的过程数据清洗首先该数据是在多个文件下的CSV文件，通过递归对文件夹内所有文件进行查询，并合并了所有的指定文件，具体的操作步骤大家可以
