1. Convolution卷积是什么？卷积在数学上用通俗的话来说就是输入矩阵与卷积核（卷积核也是矩阵）进行对应元素相乘并求和，所以一次卷积的结果的输出是一个数，最后对整个输入输入矩阵进行遍历，最终得到一个结果矩阵，下面通过一个动画使其更直观。卷积动画演示 卷积核 在上面我们没有使用很专业的数学公式来表示，来解释卷积操作和相关操作，我结合我自己的理解，争取做到白话，及时没有数学基础，也能理解卷积核
转载
2024-10-25 13:30:45
32阅读
Pytorch中自定义神经网络卷积核权重自定义神经网络卷积核权重 神经网络被深度学习者深深喜爱，究其原因之一是神经网络的便利性，使用者只需要根据自己的需求像搭积木一样搭建神经网络框架即可，搭建过程中我们只需要考虑卷积核的尺寸，输入输出通道数，卷积方式等等。我们使用惯了自带的参数后，当我们要自定义卷积核参数时，突然有种无从下手的感觉，哈哈哈哈哈哈哈哈~~，请允许我开心下，嘿嘿！因为笔者在初入神经网络
转载
2024-05-07 22:08:01
50阅读
机器学习知识点相关总结（一）——基础机器学习知识点相关总结（二）——决策树相关机器学习知识点相关总结（三）——LR相关机器学习知识点相关总结（四）——SVM相关机器学习知识点相关总结（五）——CNN相关机器学习知识点相关总结（六）——RNN,LSTM相关机器学习知识点相关总结（七）——k-means相关1.卷积层个数计算方式，CNN参数量计算，卷积计算复杂度，如果一个CNN网络的输入channel
转载
2024-03-31 06:38:53
79阅读
对于点云分割来说，最重要解决的问题基本上有两个，一个是点云的无序性问题，另一个是点云的不规则和稀疏问题。对于前者的问题，其实2017年的PointNet提出的对称函数(max pooling)就已经解决了，但是目前有很多取代之的方法。后者，很多网络利用学习邻域局部特征，编码相对位置特征解决，KPConv提出了一种可变形的Kernel，但是它的核点是固定的，针对不同的场景可能还需要进行改变，PACo
转载
2024-06-16 18:24:27
48阅读
对图像（不同的数据窗口数据）和滤波矩阵（一组固定的权重：因为每个神经元的多个权重固定，所以又可以看做一个恒定的滤波器filter）做内积（逐个元素相乘再求和）的操作就是所谓的『卷积』操作，也是卷积神经网络的名字来源。中间的过程部分可以理解为一个滤波器，即带着一组固定权重的神经元，多个滤波器的叠加便成了卷积层。一般而言，深度卷积网络是一层又一层的。层的本质是特征图, 存贮输入数据或其中间表示值。一组
转载
2024-02-22 23:13:08
74阅读
1 介绍在使用CNN搭建目标检测模型时，有一个很重要的步骤就是需要进行权重初始化，那么为什么需要进行权重初始化呢？2 权重初始化的原因关于为什么要进行权重初始化，请阅读知乎文章《神经网络中的权重初始化一览：从基础到Kaiming》，以下简称为《初始化概览》；原因一：防止深度神经网络在正向（前向）传播过程中层激活函数的输出损失梯度出现爆炸或消失如果发生任何一种情况，梯度值太大或太小，就无法有效地向后
转载
2024-04-27 16:24:23
269阅读
（1）卷积：对图像元素的矩阵变换，是提取图像特征的方法，多种卷积核可以提取多种特征。一个卷积核覆盖的原始图像的范围叫做感受野（权值共享）。一次卷积运算提取的特征往往是局部的，难以提取出比较全局的特征，因此需要在一层卷积基础上继续做卷积计算，这也就是多层卷积。（2）池化：降维的方法，按照卷积计算得出的特征向量维度大的惊人，不但会带来非常大的计算量，而且容易出现过拟合，解决过拟合的办法就是让模型尽量“
转载
2024-06-04 13:05:04
16阅读
More ConvNets in the 2020s : Scaling up Kernels Beyond 51 × 51 using Sparsity代码：https://github.com/VITA-Group/SLaK论文：https://arxiv.org/abs/2207.03620自从Vision Transformers (ViT) 出现以来，Transformers迅速在计算机
转载
2024-04-15 12:31:25
46阅读
1. 卷积层（Convolution Layer）：由若干个卷积核f（filter）和偏移值b组成，（这里的卷积核相当于权值矩阵），卷积核与输入图片进行点积和累加可以得到一张feature map。卷积层的特征：（1）网络局部连接：卷积核每一次仅作用于图片的局部（2）卷积核权值共享：一个卷积层可以有多个不同的卷积核，每一个filter在与输入矩阵进行点积操作的过程中，其权值是固定不变的。 
转载
2024-03-06 15:55:16
943阅读
package com.opencv;
import org.opencv.core.Core;
import org.opencv.core.CvType;
import org.opencv.core.Mat;
import org.opencv.core.Point;
import org.opencv.highgui.HighGui;
import org.opencv.imgcodec
转载
2024-10-23 20:45:43
39阅读
01 卷积卷积是指在滑动中提取特征的过程，可以形象地理解为用放大镜把每步都放大并且拍下来，再把拍下来的图片拼接成一个新的大图片的过程。2D卷积是一个相当简单的操作： 我们先从一个小小的权重矩阵，也就是 卷积核（kernel） 开始，让它逐步在二维输入数据上“扫描”。卷积核“滑动”的同时，计算权重矩阵和扫描所得的数据矩阵的乘积，然后把结果汇总成一个输出像素。也就是说，【卷积操作后得到的矩阵中的每个元
转载
2024-05-07 19:30:12
213阅读
超大卷积核架构Scaling Up Your Kernels to 31x31
视频讲解code PyTorchcode MegEngineTensorflow堆叠多个小kernal,认为3层3×3 > 1层 7×7？Understanding the Effective Receptive Field in Deep Convolutional Neural Networks 可视化卷积核
转载
2024-03-21 16:49:27
95阅读
一、卷积核与池化：1.1 卷积核（Convolutional）：将输入图像中一个小区域中像素加权平均后成为输出图像中的每个对应像素，其中权值由一个函数定义，这个函数称为卷积核(滤波器)。一般可以看作对某个局部的加权求和；它的原理是在观察某个物体时我们既不能观察每个像素也不能一次观察整体，而是先从局部开始认识，这就对应了卷积。卷积核的大小一般有1x1,3x3和5x5的尺寸（一般是奇数x奇数）1.2
转载
2024-03-19 13:43:45
466阅读
要理解卷积，首先你要理解什么是全连接和局部连接，全连接是什么？举个例子，100*100大小的图像，假设有100个隐含神经元，那么就有100*100*100个连接，太可怕，局部连接是什么，假设每个隐含神经元只局部连接10*10，那么就有10*10*100个连接。那么什么是卷积，什么又是权值共享？说道权值共享，就需要提到感受野，感受野其实就是一个隐含神经元的局部连接大小，权值共享就是感受野的权值一样，
线性滤波与卷积的基本概念 线性滤波可以说是图像处理最基本的方法，它可以允许我们对图像进行处理，产生很多不同的效果。做法很简单。首先，我们有一个二维的滤波器矩阵（有个高大上的名字叫卷积核）和一个要处理的二维图像。然后，对于图像的每一个像素点，计算它的邻域像素和滤波器矩阵的对应元素的乘积，然后加起来，作为该像素位置的值。这样就完成了滤波过程。
转载
2024-05-30 09:54:40
68阅读
卷积核类型简介 一个简短的介绍卷积使用“kernel”从输入图像中提取某些“特征”。kernel是一个矩阵，可在图像上滑动并与输入相乘，从而以某种我们期望的方式增强输出。看下面的GIF。 上面的kernel可用于锐化图像。但是这个kernel有什么特别之处呢？考虑下图所示的两个输入图像。第一个图像，中心值为3 * 5 + 2 * -1 + 2 * -1 + 2 * -1 + 2 * -
转载
2024-04-15 13:37:30
141阅读
卷积神经网络卷积基本知识卷积与全理解层的区别速记：局部连接；权值共享；输入/输出数据结构化详细：局部连接：卷积核尺寸远小于输入特征图的尺寸。权值共享：卷积核的滑动窗机制，使得输出层上不同未知的节点与输入层的连接权值都是一样的（即卷积核参数）。输入/输出数据结构化：局部连接和权值共享，使得剪辑操作能够在输出数据中大致保持输入数据的结构信息。 卷积神经网络的基础模块批归一化为了解决什么问题？
转载
2024-07-14 06:50:28
28阅读
一、（如果1×1卷积核接在普通的卷积层后面，配合激活函数，即可实现network in network的结构）二、应用：GoogleNet中的Inception、ResNet中的残差模块三、作用：1、降维（减少参数）例子1 : GoogleNet中的3a模块输入的feature map是28×28×1921×1卷积通道为643×3卷积通道为1285×5卷积通道为32左图卷积核参数：192 × (1
转载
2024-08-08 11:24:26
78阅读
DyNet2020-arxiv-DyNet Dynamic Convolution for Accelerating Convolutional Neural NetworksInstitute：huaweiAuthor：Yikang Zhang, Qiang WangGitHub：/Citation： 4Introduction和Google 的 CondConv，Microsoft 的 Dyn
转载
2024-03-11 21:33:52
152阅读
