基于 Flink CDC 的实时同步系统
自科杰科技大数据架构师张军，在 FFA 2022 数据集成专场的分享。
数据可视化第二版-拓展-和鲸网约车分析一等奖作品
【2023春节限定】网约车运营分析这是数据科学开源社区和鲸社区的春节传统节目，也是和鲸社区与接地气的陈老师联合举办的【商业分析训练营】系列第一期，旨在用真实的分析场景，带同学们利用春节假期体验真实的数据分析工作，提升求职与数据分析工作能力。接地气的陈老师是创业公司数据总监，公众号“接地气的陈老师”主
Logstash如何连接开启了SSL的Elasticsearch集群？
Elasticsearch从7开始开放了大量X-Pack的基础安全功能，默认情况下启动的时候就会配置开启安全功能，启用SSL，连接Elasticsearch需要采用HTTPS。这种情况下Logstash应该如何连接上Elasticsearch呢？本文从头开始演示从logstash搭建到配置连接Ela
【学习笔记】数据资源、资产、要素辨析及数据要素市场化
简单总结了数据资源、资产、要素的概念，并对数据要素市场化面临的一些现状与问题
AI 芯片的简要发展历史
AI 芯片的简要发展历史 和 AI未来研究方向
2、NIFI应用示例-GetFile和PutFile应用
3、NIFI处理器介绍、监控等4、集群部署及验证、监控及节点管理5、NIFI FileFlow示例、模板以及拓扑6、NIFI 表达式、监控、连接、负载均衡与集群7、NIFI综合应用场景（DB-Hdfs、json转换、mysql同步到hive、kafka同步）
Elasticsearch-head访问 elasticsearch 报错 401 解决方案
elasticsearch 添加跨域配置后仍然无法访问 elasticsearch 服务节点
大数据周会-本周学习内容总结015
大数据周会-本周学习内容总结015
ES数据存储和集群路由原理
不过对于 Elastic Stack 的日志场景来说，恰恰相反，我们并不需要如此高的实时性，而是需要更快的写入性能。既然涉及到磁盘，那么一个不可避免的问题就来了：磁盘太慢了！这一步刷到文件系统缓存的步骤，在 Elasticsearch 中，是默认设置为 1 秒间隔的，对于大多数应用来。如果每次
zookeeper安装
进入/export/software目录，将zookeeper软件包导入该目录下。解压zookeeper软件包 到/export/servers目录下，并重命名为zookeeper。将zookeeper/conf下的zoo_sample.cfg文件修改为zoo.cfg，并配置zoo.cfg文件。在/
hive与Oracle
hive与Oracle
大数据Doris（二十四）：Doris数据Insert Into导入方式介绍
目前 Insert Into 并不支持自定义导入的 timeout 时间，所有 Insert Into 导入的超时时间是统一的，默认的 timeout 时间为1小时。假设有36G数据需要导入到Doris，Doris集群数据导入速度为10M/s（最大限速为10M/s，可以根据先前导入的数据量/消耗秒计
高并发系统设计－Feed流系统设计
有两种实现方式：push和pull实现，首先讨论push模式。
Spark中RDD、DataFrame和DataSet的区别与联系
RDD代表弹性分布式数据集。它是记录的只读分区集合。RDD是Spark的基本数据结构。它允许程序员以容错方式在大型集群上执行内存计算。与RDD不同，数据以列的形式组织起来，类似于关系数据库中的表。它是一个不可变的分布式数据集合。Spark中的DataFrame允许开发人员将数据结构(类型)加到分布式
大数据技术（入门篇）--- 使用Spring Boot 操作 CDH6.2.0 Spark SQL进行离线计算
Spring Boot 操作 CDH6.2.0集群中的 Spark，使用Spark-SQL技术，实现离线计算，查询示例：简单的条件查询、稍微复杂一些的聚合查询、每行数据对象，转换为自定义Class对象、目标数据存储到MySQL数据库中、符合断言判断
超越ChatGPT：AgentGPT正在将自主AI带到浏览器中
你好，欢迎来到人工智能领域的新时代！今天我们介绍AgentGPT，这是一款最前沿的基于浏览器的平台，旨在革新人工智能的自主性。这项开创性的技术让你能够在舒适的网络浏览器中创建、配置和部署定制化的人工智能代理，以实现任何想象得到的目标。随着世界变得越来越互联，对先进的人工智能解决方案的需求前所未有地高
Kubectl scale 命令最佳实践
新钛云服已累计为您分享661篇技术干货kubectl scale 是帮助我们管理 Kubernetes 部署的众多工具之一。在本文中我们将了解如何使用此工具以及最佳使用实践。概述kubectl scale命令通过调整正在运行的容器的数量来立即缩放应用程序。这是增加部署副本数量的最快、最简单的方法，可
Flink--- 批处理 / 流处理
flink 流处理 批处理
5.1 Spark的安装与使用
第一关 Scala语言开发环境的部署 1.下载解压在Scala官网根据平台选择下载Scala的安装包scala-2.17.7.tgz解压到/app目录下：mkdir /app //创建 app 目录cd /opttar -zxvf scala-2.12.7.tgz -C /appeducode
抖音小店无货源处罚全解，一文带你读懂官方规则，合理规避风险
使用抖音电子面单，电子面单是抖音电商平台和物流公司合作向商家提供一项快速打印标准模板的物流面单服务，抖音电商提供技术支持，商家可通过平台申请添加所需物流商并订购物流单号，物流商通过平台对已订购的商家下发物流单号，商家可在绑定物流面单号至交易订单后，生成物流面单信息。，指店铺经营者没有现货，在网上找产
