【机器学习】Logistic 分类回归算法 (二元分类 & 多元分类)

一、线性回归能用于分类吗?二、二元分类2.1假设函数2.1.1例子一2.1.2例子二2.2拟合logistic回归参数\thetaθ三、logistic代价函数3.1 y = 1的图像3.2 y = 0的图像四、 代价函数与梯度下降4.1 线性回归与logistic回归的梯度下降规则相同吗?五、高级

[YOLOv7/YOLOv5系列算法改进NO.7]损失函数改进

​前 言:作为当前先进的深度学习目标检测算法YOLOv5,已经集合了大量的trick,但是还是有提高和改进的空间,针对具体应用场景下的检测难点,可以不同的改进方法。此后的系列文章,将重点对YOLOv5的如何改进进行详细的介绍,目的是为了给那些搞科研的同学需要创新点或者搞工程项目的朋友需要达到更好的效

【机器学习】数据增强(Data Augmentation)

文章目录一、引言 - 背景二、为什么需要数据增强?三、什么是数据增强?定义分类四、有监督的数据增强1. 单样本数据增强(1)几何变换类(2)颜色变换类2. 多样本数据增强(1) SMOTE(2) SamplePairing(3) mixup五、无监督的数据增强1. GAN2.Conditional

[ 注意力机制 ] 经典网络模型3——ECANet 详解与复现

[ 注意力机制 ] 经典网络模型3——ECANet 详解与复现1、Efficient Channel Attention Module2、ECANet 详解3、ECANet 复现简称 ``ECA``,2020年 提出的一种 ``高效通道注意力(ECA)模块`` ;该模块只涉及少数几个 参数,但具有明

常用的激活函数(Sigmoid、Tanh、ReLU等)

目录一、激活函数定义二、梯度消失与梯度爆炸 1.什么是梯度消失与梯度爆炸2.梯度消失的根本原因3.如何解决梯度消失与梯度爆炸问题 三、常用激活函数1.Sigmoid2.Tanh3.ReLU4.Leaky ReLU5.ELU6.softmax7.Swish 激活函数 (Activatio

人工智能--遗传算法求解TSP问题

文章目录前言一、遗传算法的概念遗传算法(Genetic Algorithm, GA):二、解决的问题对象三、 程序步骤1.针对TSP问题,确定编码2.针对TSP问题,适应度函数可定义为3.针对TSP问题,确定交叉规则对于采用整数编码表示的染色体,可以有以下交叉规则:(1)顺序交叉法(Order Cr

综述:计算机视觉中的通道注意力机制

综述:计算机视觉中的通道注意力机制这是一篇从数据域的角度,给注意力机制分为六类的综述,涵盖论文数量多。论文题目:Attention Mechanisms in Computer Vision: A Survey论文链接:https://arxiv.org/pdf/2111.07624.pdf论文代码

去噪扩散概率模型(DDPM)的简单理解

扩散模型最近在图像生成领域取得了巨大的成功,类似 OpenAI 的DALL-E 2,Google 的Imagen,以及 Stability AI 最近发行的能够达到商业级绘画目的的等,都是基于扩散模型来进行图像生成的。本文对知乎上各位大佬对于扩散模型(特别是 DDPM)的讲解进行了融合,带领大家深入

机器学习笔记 - 什么是高斯混合模型(GMM)?

高斯混合模型 (GMM) 是一种机器学习算法。它们用于根据概率分布将数据分类为不同的类别。高斯混合模型可用于许多不同的领域,包括金融、营销等等!这里要对高斯混合模型进行介绍以及真实世界的示例、它们的作用以及何时应该使用GMM。高斯混合模型 (GMM) 是一个概率概念,用于对真实世界的数据集进行建模。

自注意力机制(Self-Attention)

自注意力机制

利用LSTM实现预测时间序列(股票预测)

目录1、作者介绍2、tushare 简介3、LSTM简介3.1 循环神经网络 (Recurrent Neural Networks)3.2 LSTM网络3.2.1 LSTM的核心思想3.2.2 一步一步理解LSTM4 代码实现4.1 导入相关资源包4.2 定义模型结构4.3 制作数据集4.4 模型

人工智能练习题 + 知识点汇总(期末复习版)

认识智能的观点包括:思维理论、知识阈值理论、进化理论思维方式包括:抽象思维、形象思维、灵感思维人工智能研究的领域包括:符号智能、计算智能、机器学习、机器感知智能包含的能力包括:感知能力、记忆和思维能力、学习和自适应能力、行为能力图灵测试是图灵在1950年在论文中《计算机与智能》中提出的机器学习包括监

用pointnet++分类自己的点云数据

这篇博客主要是针对于现有的热门的激光点云处理算法pointnet++如何分类自己的数据集展开的。在介绍基本的pointnet++算法的概念、基本步骤及思想、部分代码讲解之后,会介绍如何使用自己的数据集进行分类(涉及到详细的代码改进方法及步骤)以及打印利用自己数据集跑出的模型后的点云坐标。

到底有多厉害?ChatGPT初探(多图)

到底有多厉害?ChatGPT初探

PyTorch的Dataset 和TorchData API的比较

从版本1.11开始,PyTorch引入了TorchData库,它实现了一种不同的加载数据集的方法。

Yolov5算法解读

yolov5于2020年由glenn-jocher首次提出,直至今日yolov5仍然在不断进行升级迭代。Yolov5有YOLOv5s、YOLOv5m、YOLOv5l、YOLOv5x四个版本。文件中,这几个模型的结构基本一样,不同的是和这两个参数。yolov5主要分为输入端,backbone,Neck

机器学习强基计划7-6:图文详解层次聚类AGNES算法(附Python实现)

AGNES算法是一种采用自底向上聚合策略的层次聚类算法,本文图文详解AGNES算法原理,并给出Python实现

如何检测时间序列中的异方差(Heteroskedasticity)

异方差性影响时间序列建模。因此检测和处理这种情况非常重要。

论文推荐:CCNet用于语义分割的交叉注意力

CCNet, Transformer递归交叉自注意力,比非局部神经网络更有效。华中科技大学、地平线、ReLER 和伊利诺伊大学香槟分校联合研发