GPU segmentsGPU 通过DDI访问物理内存的过程被抽象成了段模型Segmentation model(PS: Segment都是从GPU怎么访问物理内存的角度来进行讨论的)。KMD通过给出一系列的Segment给GPU，以便GPU能够通过Segment使用对应的物理内存资源。Segment受到VMM的管理。WDDM v2一共有三种段类型：内存段 Memory Segment一个内存段代
(一)mxnet 的核心接口接口功效Context指定运行设备NDArraypython与C++交互数据对象DataIter为训练提供batch数据Symbol定义网络LR Scheduler定义学习率衰减策略Optimizer优化器Executor图的前向计算与反向梯度推导Metric查看模型训练过程指标Callback回调函数KVStore跨设备的键值储存ModuleALL in one 将
转载
2024-04-27 07:44:08
137阅读
文章目录是不是只能用官方推荐的高端显卡？如何启用非官方推荐显卡？怎样判断显卡是不是加速计算了？GPU加速只能使用显卡5%，有提高使用率的办法吗？ 折腾了一天GPU加速CST计算，发现网上很多资料不太靠谱，在这里把自己走过的弯路记载一下。是不是只能用官方推荐的高端显卡？答案是可以用一般显卡。英伟达的GeForce系列同样可以用。比如RTX3090,3080,2060等。 看网上很多资料说只能用官方
转载
2024-08-30 16:57:00
249阅读
Singularity容器技术在功能上类似于Docker，使用上与Docker略有不同。Docker用户可以轻松上手使用。由于Docker 在安全、权限、高速网络支持、MPI并行支持等各方面天生且无法修补的缺陷，导致 Docker 在超算上不适合使用，为了适应超算特有的平台环境，出现了一些专门为超算环境开发的容器软件，在目前适合于超算的容器软件里，Singularity 的兼容性最好，对超算特性支持最完整，运行性能也是最好的。用户可以访问Singularity 官方用户文档了解详细使用方法。
好长时间不来更新博客了，口译，考核一直缠身，实在是懒得写文章。
最近在搞驱动方面的编程，看了点，其实我倒是对WRK更情有独钟。
今天无意间看到微软的开源OS，这可是新闻啊。
About SingularitySingularity is a research project focused on the construction of dependable systems t
原创
2008-11-25 18:58:50
991阅读
"""参考文档 https://apptainer.org/user-docs/master/build_a_container.html """ # 通过文件构建容器，相当于docker的Dockerfile ## 创建一个Singularity文件 >>> vim Singularity Boo
原创
2022-06-17 06:54:59
206阅读
我们过去曾就 containerd 的不同特点、它是如何设计的、以及我们在此过程中所解决的一些问题进行过几次讨论。Containerd 已经被 Docker、Kubernetes CRI 和其他一些项目所使用。今天这篇文章，意在帮助读者理解 Containerd 实际上如何在这些平台上使用。将来我会写更多文章来介绍 containerd 的各种功能以及设计理念。不过，现在让我们先从一些基础知识开始
转载
2024-03-07 14:29:41
39阅读
# 使用PyTorch创建Singularity容器
## 1. 简介
在本文中，我们将学习如何使用PyTorch创建Singularity容器。Singularity是一种用于创建和管理容器的工具，它允许我们在不同的计算环境中有效地运行我们的应用程序。PyTorch是一个流行的深度学习框架，用于构建神经网络模型。
在本文中，我们将按照以下步骤来创建Singularity容器：
1. 确保
原创
2023-08-18 15:19:53
92阅读
Windos和linux文件共享方法（这是VMware Tools不起作用可以用的方法，如果你的VMware Tools是好用的话，那么应该在cd /mnt文件夹下有一个hgfs文件夹，那里应该有你要和WINDOWS共享的文件，前提是你要设定一个WINDOWS下的磁盘的某一个文件夹为共享属性，如E:/share文件夹为共享，则在虚拟机-－>设置－－>选项－－>里边有个设置共享的选
# Kubernetes 是否支持 Singularity
作为一名经验丰富的开发者，我将教会你如何判断 Kubernetes 是否支持 Singularity。下面是整个流程的步骤概述：
| 步骤 | 描述 |
| --- | --- |
| 1 | 安装 Kubernetes |
| 2 | 安装 Singularity |
| 3 | 配置 Kubernetes |
| 4 | 部署 S
原创
2023-07-14 08:33:56
326阅读
目录环境依赖golang安装Singularity安装常用命令环境依赖sudo yum update -y && \
yum groupinstall -y 'Development Tools' && \
yum install -y \
openssl-devel \
libuuid-devel \
libseccomp-devel \
原创
2023-05-20 08:51:11
275阅读
# Singularity 转换为 Docker 的完整指南
在高性能计算（HPC）和科学计算领域，Singularity 是一个非常流行的容器平台。而 Docker 则是更广泛应用于各种开发和生产环境的容器工具。如果你需要将 Singularity 容器转换为 Docker 映像，这里将提供一个详细的步骤指南。
## 流程概述
下面是将 Singularity 转换为 Docker 的基本
原创
2024-10-11 04:42:21
713阅读
安装spython # pip3 install spython 生成singularity的recipe文件 # cd /path 先切换至Dockerfile的目录 # spython recipe Dockerfile &> Singularityfile 创建镜像 # singularity ...
转载
2021-10-25 11:06:00
1905阅读
2评论
背景：因研究需要，复现某论文，使用的是某校的服务器集群。他们服务器使用的容器是Singularity，而之前自己在院里用的时docker。docker学了没多久，就开始Singularity。恰恰是会一点docker，所以在转用singularity的过程中，踩的坑比较多（造孽啊）。记录一下，前事不忘，后世之师。目录一、 容器简介：1、容器2、singularity的重要概念3、si
转载
2023-07-29 17:59:56
140阅读
这篇文章主要介绍Singularity容器在Manjaro平台的安装，以及一些常见的使用场景：拉取沙箱制作容器镜像、远程制作容器镜像以及修改容器镜像的方法。总体而言Singularity是一个对非root用户非常友好的容器解决方案，在速度上没有实际测试过，只是在一些场景下可以看到比Docker性能要好一些。
转载
2022-05-04 09:12:31
267阅读
目录 文章目录目录CNICNI 规范CNI PluginMain 插件Bridge 插件HOST-DEVICEMACVLAN第三方网络插件CNI 使用的 I/O 接口虚拟化 CNIKubernetes 本身并没有实现自己的容器网络，而是借助 CNI 标准，通过插件化的方式来集成各种网络插件，实现集群内部网络相互通信。CNI（Container Network Interface，容器网络的 API
转载
2024-05-13 15:36:51
151阅读
export PATH=/home/ubuntu/software:$PATH #PATH=PWD:$PATHconda creat -c bioconda -n name_envs fastqc #conda子环境安装fastqcconda activate name_envs #切换到子环境 which -a fastqc #a*****Singularity 安装和使用 *****1.安
原创
2023-01-01 21:33:27
351阅读
点赞
# 使用Singularity创建PyTorch容器
## 引言
在进行深度学习任务时，使用PyTorch作为开发框架是一个常见选择。而使用容器化技术来管理和部署PyTorch应用程序可以带来很多优势，例如环境一致性、便捷性和可移植性等。在本文中，我将向你展示如何使用Singularity来创建PyTorch容器，帮助你入门这个过程。
## 步骤概览
下表展示了使用Singularity创建P
原创
2023-08-15 12:28:59
223阅读
文章目录引言问题背景错误原因分析可能的解决方案实战举例报错背景验证方案小结结尾 引言随着深度学习在各领域的广泛应用，GPU计算已经成为了许多研究者和工程师的必备工具。特别是在使用诸如TensorFlow、PyTorch等深度学习框架时，我们经常需要指定特定的GPU设备来进行计算。然而，有时尽管已经设置了CUDA_VISIBLE_DEVICES环境变量，程序仍然会默认使用GPU设备“0”。本文将深
转载
2024-04-28 19:50:54
166阅读
0. 基本定义
Singularity (mathematics)
数学上的奇异性一般是指，函数在该点未定义（not defined，比如取值为无穷），或者不可微（fails to be well-behaved）。
1. 举例
f(x)=1x：在 x=0 处未定义；
g(x)=|x|：在 x=0 处不可微（左导数不等于右导数）；
y2=x 也就是 y=x√,x≥0，在点 (0
转载
2017-02-22 11:11:00
930阅读
2评论
