wx62b9325dd56a7的博客_深度学习

LORA的工作原理

LoRA，全称Low-Rank Adaptation，是一种高效的模型适应技术，主要用于对大型预训练模型进行微调。

lora

大模型

低秩矩阵

权重

初始化

原创 1月前 62 阅读

机器学习中的Embeddings是什么

要理解嵌入，我们必须首先了解机器学习模型的基本要求。具体来说，大多数机器学习算法只能将低维数值数据作为输入。在下面的神经网络中，每个输入特征都

机器学习

人工智能

推荐系统

搜索

计算机视觉

原创 2023-07-10 09:11:30 270 阅读

使用预训练CNN生成图像嵌入（image embeddings）

图像嵌入是图像的低维表示。换句

cnn

人工智能

神经网络

数据集

全连接

原创精选 2023-07-09 10:33:31 824 阅读

深度学习人体解析

人体解析旨在将图像或视频中的人体分割成多个像素级的语义部分。在过去的十

深度学习

人工智能

计算机视觉

数据集

基线

原创 2023-01-14 10:38:31 274 阅读

深度学习中的正则化——L1、L2 和 Dropout

训练神经网络时最作为数据的基本概念进行学习。然而，这种习得的噪声对于每个训练集都是独一无二的。一旦模型看到来自同一问题域的新数据，但不包含这种噪声，神经网络的性能就会变得更差。“为什么神经网络首先会接收到这种噪音？”这样做的原因是这个网络的复杂度太高了。右侧图像显示了具有更高复杂性的神经网络的拟合

深度学习

机器学习

人工智能

正则化

权重

原创 2022-12-10 00:21:28 422 阅读 1收藏

深度学习数据集最常见的6大问题

如果您还没有听过，请告诉您一个事实，作为一名数据科学家，您应该始终站在一个角集。

深度学习

人工智能

计算机视觉

数据

数据集

原创 2022-10-22 15:30:13 123 阅读

用于计算机视觉及其他领域的GNN教程

来自 ( Bruna et al., ICLR, 2014 ) 的图描绘了 3D 球体上的 MNIST 图像。虽然很难让卷积

计算机视觉

人工智能

机器学习

卷积

神经网络

原创 2022-06-27 17:21:49 142 阅读

有趣的智能图像处理demo汇总

文章目录1.图像上色2. 人物卡通化3. 风格迁移1.图像上色code : https://github.com/richzhang/colorization对老照x

深度学习

图像处理

计算机视觉

github

图像特征

原创 2022-06-27 17:17:25 106 阅读

深度学习优化器论文集

文章目录2021Apollo: An Adaptive Parameter-wise Diagonal Quasi-Newton Method for N

深度学习

计算机视觉

人工智能

泛化

损失函数

原创 2022-06-27 17:15:55 87 阅读

CNN中的即插即用小模块汇总

文章目录前言1 STN2. ASPP3. Non-local4. SE5. CBAM6 DCN v1&v27 CoordConv8 Ghost9 BlurPool10 RFB

cnn

深度学习

计算机视觉

卷积

ide

原创 2022-06-27 17:15:50 818 阅读

数据增强之TrivialAugment

论文：TrivialAugment: Tuning-free Yet State-of-the-Art Data Augmentation代码：https://github.com/automl/至AA等自动搜索出的数.

计算机视觉

深度学习

pytorch

数据

搜索

原创 2022-06-27 17:15:35 147 阅读

从零开始的时间序列分类

文章目录介绍加载数据：FordA 数据集数据集描述读取 TSV 数据可视化数据标准化数据建立

时间序列

深度学习

数据集

数据

原创 2022-06-27 17:12:34 890 阅读

SoftPool

paper: https://arxiv.org/abs/2101.00440code: https://github.com/alexandrosster

池化

ide

3d

原创 2022-06-27 17:09:37 114 阅读

无需向量监督的矢量图生成算法

paper:https://arxiv.org/pdf/2102.02798.pdfcode:https://github.com/preddy5/Im2Vec文章

矢量图

栅格

数据集

原创 2022-06-27 17:08:07 58 阅读

Swin Transformer

paper: https://arxiv.org/abs/2103.14030code: https://github.com/microsoft/Swin-Transformer文章

计算复杂度

sed

github

原创 2022-06-27 17:07:47 398 阅读

FReLU

论文：https://arxiv.org/pdf/2007.11824.pdf代码：https://github.com/megvii-model/FunnelAct概述卷错的性能提

激活函数

卷积

目标检测

原创 2022-06-27 17:06:08 35 阅读

指数移动平均EMA以及Pytorch实现

EMA的定义在深度学习中，经常会使用EMA（指数移动平均）这个方法对模型的参数做平均，以求提高

权重

深度学习

数据

原创 2022-06-27 17:05:54 2175 阅读 1点赞 1收藏

注意力机制全家桶

文章目录前言SENetpapercodeCBAMpapercodeGCNetpapercode小结前言在CNN中，注意

深度学习

神经网络

cnn

2d

ide

原创 2022-06-27 17:05:32 213 阅读

关于cpp_extension的那些BUG

1. 找不到文件Traceback (most recent call last): File "D:\Python\Python36-32\lib\site-pa

python

d3

搜索

原创 2022-06-27 17:04:56 197 阅读

Multi-Task Learning Using Uncertainty to Weigh Losses for Scene Geometry and Semantics

code:https://github.com/ranandalon/mtl摘要许多深度学习应用程序都受益于具有多重回归和分类通过考虑每个任务的同方差不确定性来权衡多个损失函数。这允许我们在分类和回归设置中同时学习具有不同单位或尺度的不同量。我们演示了我们的模型学习每像素深度回归，语义和实例分

多任务

权重

深度学习

原创 2022-06-27 17:03:39 127 阅读

使用 SimCLR 推进自我监督和半监督学习

code: https://github.com/google-research/simclr文章目录前言SimCLR框架性能理解表示的对比学习

数据集

监督学习

线性分类器

原创 2022-06-27 17:02:56 123 阅读

牛津大学|“不变信息聚类” ：Invariant Information Clustering

code: https://github.com/xu-ji/IICpaper: https://arxiv.org/abs/1807.06653人类是如此擅长“无监督”，以至

聚类

互信息

数据

原创 2022-06-27 17:02:07 153 阅读

多模态深度学习简介

文章目录前言多模态数据的好处多模态学习的工作原理模式的表示模态转换特征提取融合与共同

模态

数据

数据源

原创 2022-06-27 17:01:02 1984 阅读

关于UNet weight mapping的解读

文章目录前言基于权重映射的影像分类方法实验结果对比Reference前言权重映射（weight mapping）最早于2015年Ronneberg

权重

类方法

损失函数

原创 2022-06-27 16:58:06 96 阅读

win10下detectron2的安装教程

1. 安装所需基础环境我所用的前置环境如下cuda11.1pytorch1.7python3.7VS2019，参考https://blog.

python

git

javascript

原创 2022-06-27 16:56:57 1205 阅读

微调（pytorch）

文章目录前言微调代码实现Reference前言在实际生产生活中所接触到的数据集，远不及ImageNet数据集中样本数的十

数据集

迁移学习

神经网络模型

原创 2022-06-27 16:55:28 313 阅读

Windows下安装 pycocotools

方法使用命令窗安装：pip install git+https://github.com/philferriere/cocoapi.git#subdirectory=PythonAPI参考：https://www.jianshu.com/p/8658cda3d553

git

python

cocoa

原创 2022-06-27 16:51:45 151 阅读

学习率预热（warm up)

学习率预热学习率是神经网络训练中最重要的超参数之一，针对学习率的技巧有很多。Warm up是在ResNet论文中提到的一种学习

迭代

初始化

神经网络

原创 2022-06-27 16:19:13 350 阅读

深度学习之遥感影像样例库

IEEE Data Fusion Contest 2018(IEEE, -Mar 2018)植被分类 (20 类) ,数据集有三种: 多谱线 LiDAR, 高光谱(1m), RGB 图像(0.05m)http://www.grss-ieee.org/community/technical-committees/data-fusion/data-fusion-contest/Func...

3d

高光谱

数据格式

转载 2022-06-27 16:19:00 123 阅读

这是卷积神经网络的终结吗?

文章目录前言卷积神经网络的问题Transformers模型结构重点结果前言近十年来，卷积神经网络一nition at Scale》提出了一种名为

卷积神经网络

卷积

计算机视觉

原创 2022-06-27 15:46:47 74 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

wx62b9325dd56a7的博客