AllData项目源码结构概述
AllData项目源码结构概述
【持续更新】Spark Submit命令 配置参数详解
spark submit 参数
遥感指数应用汇编
现在遥感应用领域，尤其是农业遥感、土地覆盖、矿物识别等等地物精细识别探测任务中，遥感指数已经如日中天。它们的共同特点都是采用了比值运算和归一化(normalization)处理。因此数值范围介于{-1，1}之间。由于进行了比值计算，所以其生成的指数影像还有助于消除地形差异的影响。这些指数创建的基本原
智慧楼宇解决方案-全套大合集
智慧楼宇解决方案，楼宇能耗-环境-设备统一管控解决方案。
亚通精工在A股上市：募资约9亿元，焦召明家族控制多数股权
招股书显示，亚通精工2022年上半年的营业收入和净利润较2021年同期有所下降，其中营收较2021年同期下降25.88%，归属于母公司所有者的净利润较2021年同期下降19.18%，扣除非经常性损益后的归属于母公司股东的净利润较2021年同期下降29.85%。其中，焦显阳系焦召明之子，焦扬帆系焦召明
智慧食堂项目策划书(商业计划书/立项计划)
“人工智能+物联网”作为新时代新技术的风口，为新产品结合新技术研发提供新的思路。本项目抓住高校食堂群体，精准解决用户痛点，潜在市场价值巨大。项目以人工智能技术作为技术壁垒，恰如其分的打造了智慧食堂的生态体系，体现了华侨大学鼓励学生创新创业、把学科知识转换成应生产应用的优秀培养模式。本项目同时拥有自己
【ChatGPT】ChatGPT 能否取代程序员？
ChatGPT能否取代程序员
大数据工程师的日常工作内容是干嘛？
我们真的是Sqlboy吗？
【纯干货】SpringBoot 整合 ES 进行各种高级查询搜索
在上篇 SpringBoot 整合 ElasticSearch 文章中，我们详细的介绍了 ElasticSearch 的索引和文档的基本增删改查的操作方法！本文将重点介绍 ES 的各种高级查询写法和使用。废话不多说，直接上代码！本文采用的版本号是，服务端 es 的版本号是，客户端采用的是官方推荐的版
大数据专业应该怎么学习
大数据学习不能停留在理论的层面上，大数据方向切入应是全方位的，基础语言的学习只是很小的一个方面，编程落实到最后到编程思想。学习前一定要对大数据有一个整体的认识。大数据是数据量多吗？其实并不是，通过Hadoop其中的各个组件就可以了解到，大数据并不只是数据量大而已，而是数据存储+分布式调度+数据分析的
面试系列-flink面试题（一）
30分钟的连环flink面试拷问
Eolink x CSDN｜战略合作，共建API全生命周期开发生态
近日国内最早的 API 全生命周期管理（Full Life Cycle API Management）理念推动者和国内API整体解决方案的领军者Eolink与全球知名中文开发者社区CSDN签署战略合作协议，双方将在API全生命周期管理服务和研发效能提升方面开展深度合作，共同打造API开发者社区，引领
第3关：添加数据、删除数据、删除表
第3关：添加数据、删除数据、删除表HBase的安装与简单操作
【大数据】Hadoop完全分布式配置（超详细）
Hadoop完全分布式配置-具体步骤如下默认前提：1.在Windows平台下安装Vmware平台（默认已经安装）2.在Vmware平台上安装Linux操作系统（默认已经安装）这里我已安装的是 Vmware16 和 CentOS7.整理流程我参考的是centos6的文档，centos7的命令与其不同。
HDFS文件权限管理
如上，-rw-r–r-- 表示该文件的权限，1代表其大小，dolphin supergroup 代表该文件所属用户和用户组，再后面是该文件最后修改时间和文件名信息。r表明该文件有可读权限，w代表有可写权限，x代表有可执行权限。在命令行窗口运行下面的命令，修改文件用户为dolphin，用户组为supe
大数据开发和软件开发哪个前景好？
大数据开发和软件开发哪个前景好？大数据开发学习有难度，零基础入门要先学习Java语言打基础，然后进入大数据技术体系的学习，学习Hadoop、Spark、Storm等知识。软件开发工程师根据不同的学科从事的岗位也千差万别。先说说大数据开发岗位和就业的前景，大数据开发岗位对于code能力、工程能力有要求
AI未来十年新范式，生成式人工智能的挑战与机遇
2023年3月18日，CSIG图像图形企业行活动拉开帷幕，介绍AI未来十年发展新范式...
kafka-offset手动提交和自动提交
消费者会根据设置的消费时间来决定消费多少消息。
Kafka常用配置及解析
在一个消费者组当中可以有一个或者多个消费者实例，它们共享一个公共的group ID，组ID是一个字符串，用来唯一标志一个消费者组，组内的所有消费者协调在一起来消费订阅主题的所有分区，但是同一个topic下的某个分区只能被消费者组中的一个消费者消费，不同消费者组中的消费者可以消费相同的分区。消费者co
Flink双流join导致数据重复
大家都知道flink sql 中 left join 数据不会互相等待，存在 retract 问题，会导致写入 kafka 的数据量变大，就会导致出现数据重复的问题。：即常见的曝光日志流（show_log）通过 log_id 关联点击日志流（click_log），将数据的关联结果进行下发。执行sql
