权重衰退(PyTorch)

权重衰退和正则项的影响本质以及Pytorch的代码实现

计算复杂度

计算复杂度的简单理解

深度学习参数初始化(一)Xavier初始化 含代码

Xavier初始化也称为Glorot初始化,因为发明人为Xavier Glorot。Xavier initialization是 Glorot 等人为了解决随机初始化的问题提出来的另一种初始化方法,他们的思想就是尽可能的让输入和输出服从相同的分布,这样就能够避免后面层的激活函数的输出值趋向于0。..

最新版YOLOv6训练自己的数据集(超详细完整版!)

接着上篇文章继续写,本篇文章讲如何训练自己的数据集。从官网下载YOLOv6源码:meituan/YOLOv6: YOLOv6: a single-stage object detection framework dedicated to industrial applications. (githu

CS231n-2022 Module1: 神经网络要点概述(2)

本文编译自斯坦福大学的CS231n课程(2022) Module1课程中神经网络部分的内容: 【1】Neural Networks Part 2: Setting up the Data and the Loss To be added.

Yolov5网络修改教程(将backbone修改为EfficientNet、MobileNet3、RegNet等)

在我的本科毕业论文中,我使用了Yolov5,并尝试对其更改。可以对Yolov5进行一定程度的定制化修改,例如更轻量级的Yolov5-MobileNetv3 或者比Yolov5s更好的(存疑,没有跑过大数据集,可自己实验)Yolov5-EfficientNet。......

机器学习西瓜书——第六章 支持向量机

从几何角度,对线性可分数据集,支持向量机就是找距离正负样本都最远的超平面,相比于感知机,其解是唯一的,且不偏不倚,泛化性能更好。给定训练样本集,分类学习最基本的想法就是基于训练集D在样本空间中找到一个划分超平面,将不同类别的样本分开,支持向量机倾向找到产生分类结果具有鲁棒性,对未见示例的泛化能力最强

手写数字识别-基于卷积神经网络

机器识图的过程:机器识别图像并不是一下子将一个复杂的图片完整识别出来,而是将一个完整的图片分割成许多个小部分,把每个小部分里具有的特征提取出来(也就是识别每个小部分),再将这些小部分具有的特征汇总到一起,就可以完成机器识别图像的过程了。...

爆火的Transformer,到底火在哪?

与传统的 Soft Attention相比, Self-Attention 可有效缩短远距离依赖特征之间的距离,更容易捕获时间序列数据中相互依赖的特征,在大多数实际问题中,Self-Attention 更被研究者们所青睐,并具有更加优异的实际表现。完全不依赖于RNN结构仅利用Attention机制的

AI: 2021 年人工智能前沿科技报告(更新中……)

AI: 2021 年人工智能前沿科技报告(更新中……)1. 信息模型、具身模型和脑模拟机器人的结合将诞生超级人工智能。2. 系统研究超大规模智能模型发展和影响的新兴领域已经形成,超大规模预训练模型研发竞赛进入白热化阶段,多模态预训练模型成为下一个大模型重点发展领域。3. Transformer 成为

AI: 2021 年人工智能前沿科技报告02(更新中……)

AI: 2021 年人工智能前沿科技报告02(更新中……)2021 年对于人工智能技术和产业,依旧是不平凡的一年。随着算力、数据、算法等要素逐渐齐备,先进的算法结构不断涌现,各个研究方向研究成果不断突破,成熟的 AI 技术逐渐向代码库、平台和系统发展,实现产业和商业层面的落地应用,推动人工智能发展迈

【机器学习】向量化计算 -- 机器学习路上必经路

在求解矩阵中,往往有很多很好的,经过高度优化的线性代数库,如octave,matlib,python numpy, c++,java.我们使用这些线性代数库,可以短短几行实现 所要的效果。阅读本文内容(需要一点点线性代数的知识)例如 求公式:h(x)=∑i=1nθi∗xih(x) = \sum_{i

深入理解PyTorch中的nn.Embedding

深入理解nn.Embedding模块

YOLOv6又快又准的目标检测框架 已开源

YOLOv6又快又准的目标检测框架 已开源

关于我——人工智能专业大二的一年

作为人工智能专业的本科生,需要自己开辟一条适合自己走的路

期末复习【机器学习】

期末复习【机器学习】

基于BP神经网络识别手写字体MINST字符集

问题描述:  本次实验所要解决的问题是使用人工神经网络实现识别手写字体。实验采用MINST手写字符集作为识别对象。其中60000张作为训练集,剩余10000张作为测试集。实验采用python语言进行编程,使用到一些python的第三方库。使用的神经网络模型为BP神经网络,这是一种按照误差逆向传播算法

【yolov4】基于yolov4深度学习网络目标检测MATLAB仿真

YOLO发展至YOLOv3时,基本上这个系列都达到了一个高潮阶段,很多实际任务中,都会见到YOLOv3的身上,而对于较为简单和场景,比如没有太密集的目标和极端小的目标,多数时候仅用YOLOv2即可。除了YOLO系列,也还有其他很多优秀的工作,比如结构同样简洁的RetinaNet和SSD。后者SSD其

音频数据增强(一)——mixup和SpecAugment

目录1、mixup2、SpecAugment论文地址:https://arxiv.org/pdf/1710.09412.pdfmixup通过以下方式构建虚拟的训练样本:式中,(xi,yi)和(xj,yj)是从训练数据中随机抽取的两个样本,且λ∈[0,1]。因此,mixup通过结合先验知识,即特征向量

无人驾驶: 对多传感器融合的一些思考

感谢商汤学术 2022/06/22 带来的基于BEV环视感知直播课程,借助这次机会,总结了我前段时间的工作

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈