文章目录0x0. 前言0x1. 在 DeepSpeed 中使用 PyTorch Profiler做性能调试Profile模型训练的循环标记任意代码范围Profile CPU/GPU的活动Profile 内存消耗0x2. Flops Profiler总览Flops 测量多GPU，多节点，数据并行和模型并行例子和DeepSpeed运行时一起使用在Megatron-LM中使用在 DeepSpeed 运
转载
2024-06-25 22:29:24
27阅读
JavaScript 查看 system env 的过程记录
在现代开发中，理解和操作环境变量是非常重要的。随着技术的迅速发展，JavaScript 成为许多开发者的首选语言之一。我们不仅需要在前端进行操作，有时也需了解 Node.js 环境下的系统环境变量。明确环境变量能够帮助开发者调试代码、优化配置，甚至增强安全性。在这篇博文中，我将深入探讨如何使用 JavaScript 查看系统环境变量，
# Python查看Virtual Env
Virtual Env是Python中的一个工具，用于创建和管理独立的Python环境。它可以帮助我们在同一台机器上同时运行不同版本的Python和相应的包，而不会相互干扰。在本文中，我们将学习如何使用Python查看已创建的Virtual Env。
## 什么是Virtual Env？
Virtual Env是一个用于创建和管理独立Python环
原创
2023-10-24 17:48:45
145阅读
Anaconda相关命令汇总一、管理conda1. 查看conda是否安装成功2.更新conda至最新版本3. 查看conda帮助信息4. 卸载conda五、管理环境1. 创建新环境2. 切换环境3. 退出环境至root4. 显示已创建环境5. 复制环境6. 删除环境六、管理包1. 查找可供安装的包版本2. 获取当前环境中已安装的包信息3. 安装包4. 卸载包5. 更新包 一、管理conda接下
# 如何查看Python的env
## 引言
在Python中，我们可以通过查看环境变量（env）来获取系统和应用程序的配置信息。环境变量是一组键值对，用于存储特定的系统和应用程序配置，包括路径、用户名、密码等。在本文中，我们将介绍如何查看Python的env，并提供一些示例来帮助读者更好地理解。
## 查看Python的env
Python提供了一个内置模块`os`，可以用来访问和修改环境变
原创
2023-09-18 10:10:57
427阅读
1.单列集合框架结构Collection接口：单列集合，用来存储一个一个的对象
List接口：存储有序的、可重复的数据。 -->“动态”数组
ArrayList、LinkedList、VectorSet接口：存储无序的、不可重复的数据
HashSet、LinkedHashSet、TreeSet2.Collection集合常用方法boolean add(E e) 向集
转载
2023-07-10 15:40:07
143阅读
简介提到 Python 环境管理，更多人可能会首先想到 virtualenv。但与用于创建独立包环境的 virtualenv 不同，pyenv 的作用仅限于维护不同版本的 Python。它的使用不依赖于 Python，是一个简单、独立的纯 shell 脚本工具。pyenv 也以 pyenv-virtualenv 插件的形式支持 virtualenv，强烈建议使用。安装后比较方便的是可以在你 cd
Anaconda 使用指南 Anaconda 是 Python 的一个开源发行版本。anaconda 里面集成了很多关于 python 科学计算的第三方库，主要面向科学计算且安装方便，而 python 是一个编译器，如果不使用 anaconda，那么安装起来会比较痛苦，各个库之间的依赖性就很难连接的很好。Anaconda 提供一个管理工具 conda，可以把 
一、张量的操作拼接torch.cat(): 将张量按维度dim进行拼接torch.stack()：在新建的维度dim上进行拼接t = torch.ones((2, 3))
t_0 = torch.cat([t, t], dim=0)
t_1 = torch.stack([t, t], dim=0)
print(t_0)
print(t_0.shape)
print(t_1)
print(t_1
转载
2024-06-18 15:49:18
304阅读
网络参数保存加载、梯度/权重查看网络参数保存和加载：>只加载名称相同的部分
>model.load_state_dict(torch.load(weight_path), strict=False)
> torch.save(myNet.state_dict(),'pakage_pkl/net_parameter.pkl') # 网络参数保存
> myNet.load
转载
2023-10-16 16:24:16
749阅读
关于如何解决“查看pytorch”的问题，今天我们将深入探讨这个话题。从协议背景到工具链集成，下面的内容将帮助你全面理解这一过程。
我们先来看一下关于“查看pytorch”的协议背景。在IT技术中，数据的交流和处理是非常关键的。针对“查看pytorch”这一请求，网络层上会经过多个阶段。为了帮助理解，我创建了一个四象限图，展示出不同的处理阶段与相应的功能。
```mermaid
quadran
构建Pytorch虚拟环境查看显卡状态(Linux、Windows)创建虚拟环境Linux安装Anaconda开始配置安装Cuda和Cudnn安装pytorch方法一方法二方法三pip更换清华镜像源Conda配置修改多版本cuda切换 查看显卡状态(Linux、Windows)nvidia-smi 在这里可以看到已装显卡型号、显存占用、哪些进程在占用显存、驱动版本、驱动可支持最高cuda版本发现
转载
2024-03-08 14:04:37
96阅读
文章目录1.查看GPU1.1.查看当前GPU是否可用1.2.查看GPU数量1.3.返回GPU名字1.4.返回当前设备索引2.指定GPU2.1.使用 CUDA_VISIBLE_DEVICES2.1.1.在终端中指定2.1.2.代码中指定2.2.使用函数 set_device 1.查看GPU1.1.查看当前GPU是否可用#cuda是否可用
torch.cuda.is_available() # 返
转载
2023-07-02 22:46:12
661阅读
pytorch环境配置及安装1.安装conda2.创建python虚拟环境3.安装pytorch（1）更换清华源方便下载pytorch（2）进入pytorch官网下载pytorch1.安装conda2.创建python虚拟环境3.安装pytorch 1.安装conda2.创建python虚拟环境3.安装pytorch（1）更换清华源方便下载pytorch（2）进入pytorch官网下载pytor
转载
2024-07-21 09:55:00
74阅读
文章目录PyTorch 动态计算图Pytorch张量第一个网络mnist网络初始化和前向传播dataloader/dataprivder优化器和损失函数训练过程完整代码 PyTorch 动态计算图在讨论 PyTorch 的各个组件前，我们需要了解它的工作流。PyTorch 使用一种称之为 imperative / eager 的范式，即每一行代码都要求构建一个图，作为定义完整计算图的一个部分。即
转载
2023-10-26 14:02:25
106阅读
1 查看DISPLAY是否设置：env| grep DISPLAY 如未设置则，export DISPLAY=192.168.0.9:0.0 (斜体字修改为自己的服务器的ip)2 root用户执行 xhost +3 切换到oracle用户安装即可--------------------------...
转载
2015-04-23 11:45:00
797阅读
# Python 虚拟环境及其命令使用指南
在现代Python开发中，虚拟环境是不可或缺的工具。它允许开发者在不同项目之间保持依赖包的独立性，避免因版本冲突而导致的问题。本文将为您介绍如何查看和管理Python虚拟环境，特别是使用`env`命令。
## 什么是Python虚拟环境？
Python虚拟环境是项目的隔离空间。在这个空间里，您可以独立安装特定版本的包而不会影响系统的全局环境。通过使
原创
2024-10-20 04:07:11
647阅读
PyTorch环境配置及安装初步机器学习，这里记录下一些学习经过，之后以便于自己查看，同时欢迎各位大佬点评，本节是机器计算的一个包的安装和简单验证。1.流程确定自己的硬件信息-确定电脑有英伟达（NVIDIA）显卡下载安装Anaconda利用conda或者pip安装PyTorch（坑最多的）
确定自己安装的CUDA版本与GPU关系安装GPU版本PyTorch2.下载安装Anaconda在此我就
?作者简介：大家好，我是车神哥，府学路18号的车神? ⚡About—>车神：从寝室到实验室最快3分钟，最慢3分半（那半分钟其实是等红绿灯） 不定期学习《20天掌握Pytorch实战》，有兴趣就跟着专栏一起吧~开源自由，知识无价~ 自动微分机制一、?前言二、?动态计算图简介三、?计算图中的Function四、?计算图与反向传播五、?叶子节点和非叶子节点五、?计算图在TensorBoard中的可
转载
2024-07-26 08:37:01
40阅读
文章目录使用PyTorch计算梯度数值Autograd简单的自动求导复杂的自动求导Autograd 过程解析扩展Autograd import torch
torch.__version__'1.0.1.post2'使用PyTorch计算梯度数值PyTorch的Autograd模块实现了深度学习的算法中的向传播求导数，在张量（Tensor类）上的所有操作，Autograd都能为他们自动提供微分，
转载
2024-04-20 18:27:51
183阅读
