人工智能：人脸识别技术应用场景介绍
随着短视频、直播的流行，人像美化技术现在越来月成熟，现在可以通过人脸美化、编辑把人脸的关键点检测出来，然后进行放大眼睛、美白皮肤、瘦脸等操作，还可以增加一些贴纸效果。这种业务系统的流程一般都是先在业务系统对人脸、个人证件的采集，然后在登陆系统、支付场景等使用前端图像和服务器上的图像进行对比，来验证身
【004hive基础】hive的文件存储格式与压缩
hive文件存储格式与压缩
大数据---聚类分析概述及聚类评估
分类划分方法：将有n个对象的数据集D划分成k个簇，并且k≤n，满足如下的要求：规定k=2,即划分为两个簇然后先随机选取两个红色的点作为聚类中心,然后通过计算其他点与中心点的距离来划分簇,当此次划分完成后通过计算均值来重新定义聚类中心,然后重复上述过程来重新划分簇.直到最后发现此次形成的簇与上一次相同
AI语音合成——Text to speech
作者：禅与计算机程序设计艺术 1.简介什么是语音合成？语音合成就是把文字转换成人类可以听懂的声音。近几年，随着深度学习的发展，语音合成领域取得了巨大的进步。通过深度学习技术的训练，计算机模型能够从原始文本数据中学习到人类的语音表达模式，并将其转化成声音。在语音合
HDFS概述及其优缺点
HDFS的全称是hadoop distributed file system，即hadoop的分布式文件系统。见名知意，它就是用来进行文件存储的。毕竟它是大数据的一个组件，用来存储这种海量的数据。它是基于03年10月份，谷歌发表的GFS这篇论文做的开源实现。目前是hadoop的一个核心子项目，用来解
大数据技术原理与应用-林子雨版-第二章课后习题
在配置 Hadoop 时，Java 的路径 JAVA_HOME 是在 Hadoop 的环境变量配置文件中进行设置的。默认情况下，Hadoop 会在其安装目录下的 etc/hadoop 目录中包含一个名为 hadoop-env.sh 的文件，该文件定义了 Hadoop 的环境变量配置信息，其中包括 J
Flink 系列文章汇总索引
某一知识点，并辅以具体的示例进行说明。本专栏的文章编号可能不是顺序的，主要是因为写的时候顺序没统一，但相关的文章又引入了，所以后面就没有调整了，按照写文章的顺序进行编号。但一个专题的顺序号是统一的，不存在编号跳跃情况。
2023年AI算力报告专题合集丨精选8份丨
英伟达作为 GPU的发明者，其芯片架构保持了快速选代，计算性能实现大幅度提升，且注重软件生态建设，提供高质量的软件开发工具，使其成为全球 AI 芯片产业的龙头，在政策与雪求的双轮驱动下，中国 AI 芯片厂商正在奋起直追，尤其是在 ASIC路线上加大投入，目前已经涌现出寒武纪、华为异腾、海光信息、爆原
【ES实战】索引生命周期管理（一）
索引生命周期管理
Spark---资源、任务调度
例如：要找出网站活跃的前10名用户，活跃用户的评测标准就是用户在当前季度中登录网站的天数最多，如果某些用户在当前季度登录网站的天数相同，那么再比较这些用户的当前登录网站的时长进行排序，找出活跃用户。1、默认情况每个worker为当前的Application启动一个Executor，这个Executo
程序员杂谈：探讨程序员的商业认知—盈利思维方式【文末送书-08】
程序员杂谈：探讨程序员的商业认知—盈利思维方式【文末送书-08】程序员的商业认知和盈利思维方式对于成功在科技行业中发展至关重要。以下是一些探讨程序员商业认知和盈利思维方式的关键方面：
HIVE内表与外表的区别
hive内外表的区别，主要总结六点区别
Spark与PySpark(1.概述、框架、模块)
大规模数据处理的统一分析引擎弹性分布式数据集（即RDD)的概念。
（未传知网）大数据环境下的隐私安全的图像特征提取及应用
因此，本研究的目的是针对大数据环境下的隐私安全问题，提出有效的图像特征提取与应用方法，以保证用户的隐私信息不被泄露。为了保护用户的隐私安全，本文提出了一种基于多方计算的图像特征提取方法，通过将参与计算的各方的图像数据进行加密处理，实现了对个人隐私的保护而不损失图像特征提取的效果。基于以上背景，本文旨
【大数据】Doris 构建实时数仓落地方案详解（二）：Doris 核心功能解读
Apache Doris 是由百度研发并开源的数据库项目。 Doris 2008 年开始在百度内部立项，经历了五个大版本的迭代后于 2017 年开源，2018 年进入 Apache 基金会孵化项目。2022 年 4 月 18 日正式发布 Doris 1.0，2022 年 6 月 16 日正式毕业，成
CentOS7安装教程----图文详解
选择新CD/DVD (IDE) ---->使用ISO映像文件（选择CentOS 7 镜像存放的位置）---->关闭。选择自动配置分区（也可选择我要配置分区，此处喜欢则自动配置分区）---->完成。选择linux（L）---->CentOS 7 64位---->下一步。创建新的虚拟机--->选择自定义
Flink
前面说过有状态计算其实就是需要考虑历史数据而历史数据需要搞个地方存储起来Flink为了方便不同分类的State的存储和管理,提供了如下的API/数据结构来存储StateKeyed State 通过 RuntimeContext访问，这需要 Operator 是一个RichFunction。保存Key
大数据机器学习深度解读ROC曲线：技术解析与实战应用
本文全面探讨了ROC曲线（Receiver Operating Characteristic Curve）的重要性和应用，从其历史背景、数学基础到Python实现以及关键评价指标。文章旨在提供一个深刻而全面的视角，以帮助大家更好地理解和应用ROC曲线在模型评估中的作用。
Spark系列之Spark的RDD详解
Spark系列之Spark的RDD详解
2023_Spark_实验二十五：SparkStreaming读取Kafka数据源：使用Direct方式
通过终端模拟输入将数据输入到kafka集群，使用scala开发消费者消费kafka订阅的主题数据，实现词频统计。
