十亿条数据需要每天计算怎么办？Spark快速入门
spark快速入门，解决亿级数据计算问题
苹果首破例，允许在韩使用替代支付系统
近年来，苹果和谷歌一直因强制开发者使用其 App Store 内支付系统而受到批评。去年 Epic Games 的游戏《堡垒之夜》因为绕过了苹果 App Store 内部支付系统而被下架，Epic Games 愤怒上诉苹果却未能如愿。目前这场纠纷还未结束，法院未强制要求苹果上架应用，不过法院要求苹果
现代数据环境下，如何做数据集成？这11个靠谱实践收藏了
现代数据环境下，如何做数据集成？这11个靠谱实践收藏了
助力地质灾害专业监测，TDengine为和谐社会保驾护航
监测物联网大数据
HBase集群搭建（一）
1.准备三台机器 centos7安装步骤 略（ 可以看我的 虚拟机安装 centos7 文章）2.配置免秘钥访问略（可以看我的免秘钥配置文章）3.JKD 安装1.8略4.下载 HBasehttps://hbase.apache.org/downloads.html5.安装tar -zxvf hbas
2021 OceanBase 年度报告 | 用技术让海量数据的管理和使用更简单
“过去一年，OceanBase 的客户数实现翻番达到400多家，其中非金融类客户的营收占比超过3成。”1月6日上午，OceanBase CEO杨冰在DC2021分布式数据库开发者大会上首次对外披露了 OceanBase 的客户和营收情况。近两年，政策鼓励支持，行业百花齐放，开发者共创共建，一起为中国
关于我月薪不破万，从干了三年的外包公司离职这件事
先说一下自己的个人情况，18年大专毕业通过校招进入了一家外包公司，干了接近3年的CRUD，今年年初，感觉自己不能够在这样下去了，每天都是重复的工作，一是工资低，而是学不到什么技术，长时间呆在一个舒适的环境会让一个人堕落！而我已经在一个企业干了三年的CRUD，已经让我变得不思进取，谈了2年的女朋友小丽
通过RabbitMq实现动态定时任务的实现。
通过RabbitMq实现动态定时任务的需求。一、需求背景定时任务的需求所谓是数不胜数，其中实现方式也是百花起飞，用得最多的大概率为Springboot中的 @Scheduled(cron = “0 0 1 1 * ?”) 注解，或者是定时任务XXL-JOB框架，这两者我解除的比较多，除此之外还有，Q
JuiceFS 即将发布 1.0 并调整开源许可
开源一周年JuiceFS 开始于 2017 年，是一款云原生分布式文件系统，旨在帮助企业解决多云、跨云、混合云环境下所面临的诸多挑战：数据安全和保护、大数据架构升级、海量小文件访问、Kubernetes 标准存储等。 JuiceFS 完全兼容 POSIX、HDFS、S3 访问协议，并提供 Kuber
源码请拿走：用Elasticsearch完成视频检索（有详细注释，学习可用）
@Servicepublic class SearchServiceImpl implements SearchService { @Autowired RestHighLevelClient restHighLevelClient; /** * * @param q 搜索关键字 *
什么是大数据？
本文从七个部分阐述大数据分析，包括：背景、定义、意义、挑战及未来趋势以及市场等部分。
hive metastore配置kerberos认证
hive从3.0.0开始提供hive metastore单独服务作为像presto、flink、spark等组件的元数据中心。但是默认情况下hive metastore在启动之后是不需要进行认证就可以访问的。所以本文基于大数据组件中流行的kerberos认证方式，对hive metastore进行认
Log4j 学习笔记
Log4j 使用及源码学习
搭建Hadoop集群(超详细版）
搭建Hadoop集群
你对Web3的迅速发展一无所知，逃离大厂去拥抱Web3
Web3，正在成为越来越多硅谷科学家的职业新选择。1月7日，Twitter Spaces首席数据科学家Julien Gaillard宣布将加入DeFi借贷平台Aave。他在推特上留言：“之所以选择Web3，是因为其核心价值在于去中心化、创新、公平和实验。”他表示：“Web3和数据科学是天生一对，链上
Hadoop分布式搭建
1.Hadoop官网下载3.1.2网址 http://hadoop.apache.org/https://archive.apache.org/dist/hadoop/common/hadoop-3.1.2/2.准备三台机器(本教程使用的虚拟机)centos 7 安装教程可以看我的这篇https:/
大数据之在Liunx中安装MySQL
大数据之 Linux MySQL安装教程
SQLDeveloper连接Hive使用说明
SQLDeveloper连接Hive使用说明
七种常见分布式事务详解（2PC、3PC、TCC、Saga、本地事务表、MQ事务消息、最大努力通知）
在分布式系统中一次操作需要由多个服务协同完成，这种由不同的服务之间通过网络协同完成的事务称为分布式事务。本文详解介绍七种常见分布式事务的原理以及优缺点和适用场景（2PC、3PC、TCC、Saga、本地事务表、MQ事务消息、最大努力通知）
