作者：Yuval Greenfield编译：ronghuaiyang最常见的神经网络错误：1)你没有首先尝试过拟合单个batch。2)你忘了为网络设置train/eval模式。3)在.backward()之前忘记了.zero_grad()(在pytorch中)。4)将softmaxed输出传递给了期望原始logits的损失，还有其他吗？????这篇文章将逐点分析这些错误是如何在PyTorch代码示
转载
2024-08-30 21:07:08
53阅读
1.conv2d的参数及含义
2.pytorch如何微调fine tuning：在加载了预训练模型参数之后，需要finetuning模型，可以使用不同的方式finetune
局部微调：加载了模型参数后，只想调节最后几层，其它层不训练，也就是不进行梯度计算，pytorch提供的requires_grad使得对训练的控制变得非常简单 model = t
转载
2023-09-28 14:01:03
253阅读
算法面经问题初步整理记录1、斐波那契数列 2、和为0的三元组 思路：先把数组排序，两层循环，第一层循环代表第一个数，第二层循环参考找数组中和为特定值的二元组；如果要找所有的三元组，则在找到一组解后，left += 1, right -= 1, 为了避免重复解，可以判断下left和left -1,right和right + 1是否相等，相等就跳过。 3、python装饰器的作用 装饰器的作用就是用一
转载
2023-12-19 18:46:38
403阅读
Pytorch的面试问题（1）什么是 PyTorch？PyTorch 是基于 Torch 库的计算机软件的一部分，它是 Python 的开源机器学习库。它是由 Facebook 人工智能研究小组开发的深度学习框架。它用于自然语言处理和计算机视觉等应用。（2）PyTorch 的基本要素是什么？PyTorch 中有以下元素是必不可少的：PyTorch 张量PyTorch NumPy数学运算Autogr
转载
2023-11-14 09:05:49
219阅读
JavaScript 数据类型以及 typeof 返回值typeof x undefined
typeof undefined undefined
typeof true boolean
function A() {}
typeof A function
const arr = []
const obj = {}
typeof arr object
typeof obj objec
转载
2024-05-28 15:38:11
31阅读
Task011、Pytorch安装2、基础知识2.1 张量(Tensor)2.2 自动求导2.3 梯度2.4 并行计算3、前置知识打卡 1、Pytorch安装由于之前使用过Pytorch，所以说不需要再重新下载，直接开始后续的基础知识2、基础知识由于之前学习过numpy系列，所以说对于Pytorch的理解会轻松很多。2.1 张量(Tensor)①创建tensorimport torch
x =
转载
2023-11-14 11:08:07
845阅读
1、nn.functional中的函数和nn.Module主要区别function定义的激活函数等不需要学习，参数更新。激活函数（ReLU,sigmoid,tanh），池化等可以使用functional替代。module一般定义层，参数需要更新，对于卷积，全连接等具有可学习参数的网络建议使用nn.Module2、pytorch使用多gpu训练机制 &n
转载
2023-10-22 07:00:55
1230阅读
1.torch包：有多维张量的数据结构及基于其上的多种数学操作；提供多种工具，更有效对张量和任意类型序列化；有CUDA的对应实现，可在NVIDIA GPU上进行张量运算2.张量Tensorstorch.is_tensor(obj)：判断对象是否是一个pytorch张量；torch.is_storage(obj)：判断对象是否是一个pytorch storage对象；torch._set_defau
转载
2023-12-19 12:28:35
137阅读
链接基础实战——FashionMNIST时装分类我们这里的任务是对10个类别的“时装”图像进行分类，使用FashionMNIST数据集（https://github.com/zalandoresearch/fashion-mnist/tree/master/data/fashion ）。上图给出了FashionMNIST中数据的若干样例图，其中每个小图对应一个样本。 FashionMNIST数据集
转载
2024-06-23 11:46:46
116阅读
文章目录系列六：PyTorch相关知识点及端侧部署基础知识1．PyTorch相较于Tensorflow的优缺点：2.机器学习建模调参方法总结？3. 减小模型内存占用有哪些方法？4.有哪些经典的轻量化网络？5. GPU显存占用和GPU利用率的定义？6. 神经网络的显存占用分析？7. X86和ARM架构在深度学习侧的区别？8. FP32，FP16以及Int8的区别？9. 为何在AI端侧设备一般不使用
转载
2024-05-05 22:38:26
189阅读
好吧，经过了两轮电话面试以及一轮正式面试，花旗终于在第二天通知我的猎头说面试结果非常赞，老板整个乐翻天。但是现在暂时花旗内部还谈不拢，因为有两个团队在争论我到底要去哪个部门（基本上就是在抢人），所以具体年薪到明天他们内部商定后再给。这已经是我从毕业以来面试过的第七家公司，至今仍然保持完全不败面试七连胜的纪录，所以终于坐下来考虑写点面经。对于我来说，面试不是一个被动的过程，而是互动。很多人把面试当做
转载
精选
2013-11-28 20:29:07
902阅读
百度一面 useMemo、useCallback区别，怎么用useMemo实现useCallback bfc 求两数组交集 手写函数柯里化 父div里两个子div（inline-block），为什么两个子div中间会有小缝隙，如何解决 外边距重叠，及解决方案 手写bind百度二面从url输入到浏览器渲染的全过程 什么是合成层 react高阶组件是什么，你见过哪些通用的高阶组件，如何实现 手写节流防抖 状态码301 302 啥意思 304协商缓存 强缓存 1000个请求
原创
2021-09-02 14:05:14
189阅读
索引的实现原理 InnoDB也使用B+Tree作为索引结构。InnoDB支持聚簇索引，聚簇索引就是表，所以InnoDB的数据文件本身就是索引文件。 B+Tree 的每个叶子节点都包含了主键值、事务ID、用于事务和MVCC的回滚指针以及所有的剩余列。非叶子节点只需要存储索引信息 InnoDB的二级索引 ...
转载
2021-08-30 17:29:00
174阅读
2评论
13/08/2014 第一个technical全职面 Java： Integer i = 10; incr(i); // Is i now 11? void incr(Integer val) { val ++; return; } int i = 10; incr(i); // Is i now
转载
2017-04-30 21:45:00
186阅读
2评论
与同学乘527到动物园转315到联庄，向前500米既是恒生大厦（hundsun）居然只用了40分钟，
原创
2021-08-10 17:41:35
387阅读
太棒了 ----PyTorch 作为一个深度学习平台，在深度学习任务中比 NumPy 这个科学计算库强在哪里呢？我觉得一是 PyTorch 提供了自动求导机制，二是对 GPU 的支持。由此可见，自动求导 (autograd) 是 PyTorch，乃至其他大部分深度学习框架中的重要组成部分。1、pytorch如何微调fine tuning：在加载了预训练模型参数之后，需要finetuning模型，可
转载
2023-11-30 20:11:10
858阅读
说在前面：自己为了准备面试Java后端开发准备的面经，部分有摘自其他网站，还有平时面试总结的，分享一下。Java开发基础0. 抽象类和接口的区别 语法：构造器--抽象类可以，接口不可以具体方法-抽象类可以有，接口全是抽象方法，但在1.8以后可以有默认方法成员修饰符--接口中全是public,抽象类可以是private、默认、protected、public继承和实现--抽象类只能是单继承
原创
2023-05-04 12:31:47
161阅读
一、操作系统1. 介绍一下信号量和互斥锁信号量是非负数，只有两个操作wait,signal 互斥量是0,1，只能用于一个资源的互斥访问 互斥量用于线程的互斥，信号线用于线程的同步。 有人做过如下类比： Mutex是一把钥匙，一个人拿了就可进入一个房间，出来的时候把钥匙交给队列的第一个，一般的用法是用于串行化对临界区代码的访问，保证这段代码不会被并行的运行。 Semaph
转载
2021-07-19 15:10:23
10000+阅读
持续更新
原创
2021-08-02 10:22:38
261阅读
###Tenda window对象中的onload*方法在页面加载完成后立即触发 js V8引擎的垃圾回收机制是：标记清除，引用计数 基本类型保存在栈内存中，引用类型保存在堆内存中 CORS跨域资源共享将请求分为简单请求和非简单请求 http缓存分为强缓存和本地缓存 Vue中计算属性是否可以缓存：是 ...
转载
2021-10-09 16:07:00
212阅读
2评论
