在说明带宽之前，先来了解一下数据是如何发送的：一、数据的发送过程：应用程序将要传输的数据放入内存中。应用程序使用send等库函数，通知内核将传输数据放入内核缓存区。数据是以队列的形式进入的，如果数据较多，则等前一波数据发送完后，再发送另外一拨数据，具体显示为send会多调用几次cpu通知网卡将内核缓冲区的数据存放到网卡缓冲区网卡将数据从字节变为二进制数字信号将二进制数字信号使用光纤或铜线传播二、带
转载
2024-10-16 15:54:51
27阅读
前言一直有升级设备的嗜好，前几天又换了张无线网卡记录数据时发现网络相关的都换了个遍了。买网卡前想去网上搜非wifi6网络更换wifi6网卡有没有提升，却找不到文章或者视频，正好我有记录换设备前后的数据的习惯，把近几年升级网线、路由器、无线网卡后的数据分享出来，只是测量了最基本的速率和延迟，并不专业，仅供参考。网线网线是从送的五类线换成六类线，好像还是cat6e，不过买的是细线可能会有点影响效果。原
在虚拟桌面项目里，传统桌面上存储的用户数据不可避免的要迁移到虚拟桌面中来。这几乎是所有IT管理员的要求，因为数据安全是企业选择虚拟桌面最大”诱惑”之一。想象一下，几百台计算机都要迁移到数据中心，还要使用以往的移动硬盘，刻录光盘等方式来实现 数据的搬迁吗？这个工作量实在是太大了，因为除了备份个性化数据，到虚拟桌面里面还要还原这些数据到相应的位置呀。有朋友说了，使用P2V工具不就搞定了嘛，但是我个人不
物联卡与物联卡云平台都是物联网生态系统中的重要组成部分，它们之间相辅相成，共同构建和谐的物联网运作环境，是物联网反映于社会智能设备的重要工具。如今物联卡在政府调控与市场推动下连接数量暴增，对于物联网企业而言，搭建一个正规、稳定的物联卡云平台开始被摆放在物联网运作中一个越来越重要的位置，那么物联网企业应该如何搭建物联卡云平台呢？ 物联卡 物联卡又叫物联网机器卡，顾名思
转载
2024-03-26 06:32:29
33阅读
在DL的科研和工程中，对数据的操作是一个重要的环节，其中最常用的工具是Numpy和Pytorch。Numpy一个强大的数据操作的工具，但是它不能在GPU上运行，只有将Numpy中的ndarray转换成tensor, 才能在GPU上运行。所以我们在必要的时候，需要对ndarray和tensor进行操作，同时由于list是一种我们在数据读取中经常会用到的数据结构，所以对于list的操作也是经常用到的一
我是个小白，从零学RDMA，如有错误还请指正，不胜感激。在Unbuntu18.04环境下，内核自带rdma-core，输入以下命令可以查看系统版本信息cat /proc/version检查RDMA网卡是否已安装lspci | grep -i mellanox如果存在则会输出类似于以下的相关信息检查网卡工作状态，ibv_devices是一个包含在libibverbs-utils.rpm包里的工具，用
No.1读写的基本原理磁盘的两面涂有磁性材料，根据N，S可以来记录0，1两种状态。写入数据时，磁头电磁铁改变极性材料的磁性来写数据。 读入数据时，磁头的读取器可以得到磁性材料的极性然后还原成0，1电信号。 No.2处理器对磁盘的控制 再来回顾一下8086下1M内存的分配，我们先前已经介绍过在统一编址的模式下，显存对应的区域是0xb8000-0xbffff，通过操作这里相应的内存就可以控
这里写目录标题使用collate_fn单进程和多进程数据加载平台特定行为多进程数据加载中的随机性内存固定(Memory Pinning)torch.utils.data.DataLoadertorch.utils.data.Datasettorch.utils.data.IterableDataset 使用collate_fn当启用或禁用自动批处理时，collate_fn的使用略有不同。禁用自动
我们知道，cpu需要通过某个接口与主板连接的才能进行工作。cpu经过这么多年的发展，采用的接口方式有引脚式、卡式、触点式、针脚式等。而目前cpu的接口都是针脚式接口，对应到主板上就有相应的插槽类型。不同类型的cpu具有不同的cpu插槽，因此选择cpu，就必须选择带有与之对应插槽类型的主板。主板cpu插槽类型不同，在插孔数、体积、形状都有变化，所以不能互相接插。  
转载
2024-10-25 09:27:02
131阅读
3COM/SMC/Intel网卡的性能对比 ... 正在为选择网卡头痛的朋友不妨看看
命令行FTP流通量和CPU使用率
在每个系统重新启动之后，我们运行Windows CPU性能监视器开始记录，然后开启一个DOS窗口，并以FTP（File Transfer Protocol，文件传输协议）传送一个Micr
以前，我从某些书籍上有看到编译器在优化代码的时候会改变C++代码的执行顺序；其实CPU为了优化执行的效率也可能会动态改变代码执行顺序。 以下内容来自《程序员的自我修养--链接、装载与库》 一段典型的double-check的singleton代码如下： volatile T* pInst = 0;
T* GetInstance()
{
if (pInst ==
我已经安装了Anaconda 23.11.0，按照以下步骤在Anaconda环境中使用PyTorch：创建虚拟环境（可选）：为了隔离不同项目的依赖，建议在Anaconda中创建一个虚拟环境。可以使用以下命令创建一个名为"myenv"的虚拟环境：conda create --name myenv激活虚拟环境：创建虚拟环境后，需要激活该环境才能使用其中的软件包。使用以下命令激活名为"myenv"的虚拟
转载
2024-10-19 08:30:49
48阅读
JWT的组成签名的目的信息会暴露？JWT的适用场景JSON Web Token（JWT）是一个非常轻巧的规范。这个规范允许我们使用JWT在用户和服务器之间传递安全可靠的信息。让我们来假想一下一个场景。在A用户关注了B用户的时候，系统发邮件给B用户，并且附有一个链接“点此关注A用户”。链接的地址可以是这样的 https://your.awesome-app.com/make-friend/?fro
转载
2024-10-11 11:15:13
43阅读
在Kubernetes（简称K8S）集群中，要实现对网卡和GPU的识别，需要通过节点配置和调度策略来实现。接下来我将向你介绍K8S如何识别网卡和GPU的流程，并提供相应的代码示例来帮助你理解。
### K8S如何识别网卡和GPU
#### 流程概述
下面是K8S如何识别网卡和GPU的整体流程：
| 步骤 | 操作 |
| ------ | ------ |
| 步骤一 | 部署支持网卡和GP
原创
2024-03-12 13:21:30
99阅读
一、CPU与GPU二、数据迁移数据在GPU和CPU之间迁移： 数据迁移使用的方法：to()函数进行迁移的数据：Tensor和Module2.1 to函数to函数：转换数据类型/设备tensor.to(*args, **kwargs)module.to(*args, **kwargs)区别：张量不执行inplace，模型执行inplace 张量执行to函数之后，会重新构建一个新的张量，而module
转载
2024-04-01 20:10:17
558阅读
由于在使用tensorflow训练模型时，会自定义默认将所有gpu占满，所以在训练时可以指定使用tensorflow使用的gpuimport os
#指定第二块GPU
os.environ['CUDA_VISIBLE_DEVICES'] = '1'
#自定义显存
gpu_options = tf.GPUOptions(per_process_gpu_memory_fraction=0.7)
s
3.8 在CPU和GPU之间复制数据C++ AMP：用Visual C++加速大规模并行计算数据可以在CPU和加速器（通常是GPU）之间自动复制，也可以根据需要使用amp.h中众多的copy()重载函数之一显式复制。例如，我们可以在默认加速器上构造array，然后仅使用一条函数调用便可以把数据复制进去：array<int, 1> a(5, v.begin(), v.end(
如何将数据移动到新硬盘（装机）本文对磁盘的数据操作具有一定的风险，如果读者对装机的一些知识不太熟悉，不建议直接上手操作。背景笔记本上面原来的256G的固态硬盘不够用了，所以最近买了一块新的500GB的固态硬盘，在不想重装系统的情况下想着把原来的固态硬盘上面的数据原封不动地移动到新的固态上面来，在实践的过程中遇到了很多问题，所以写了本篇文章记录下。准备工作一个移动固态硬盘盒，用来装拆下来的固态硬盘。
转载
2024-10-13 21:41:54
48阅读
最近多次安装、使用infiniband网卡，每次都要到处寻找相关资料，所以决定做此总结，方便查找。1. 基础知识首先，得了解什么是RDMA，贴几个资料：然后得了解如何实现，这两个可以有个初步了解：编程过程，真正有用的还是官方的手册：mellanox官方社区能找到很多你需要的东西：也下了个中文版，但我感觉英文版看着更好。RDMA编程入门可参考的项目：2. 驱动安装下载驱动，进入网站选择相应系统和软件
1.查看网络配置使用ifconfig命令查看网络接口地址 主机的网络接口卡（网卡）通常称为“网络接口”。在Linux系统中，使用ifconfig命令可以查看网络接口的地址配置信息。ifconfig -a 查看所有网络接口信息
ifconfig ens33 查看指定的网络接口信息： 只查看网卡ens33的配置信息
ether ：表示网络接口的物理地址（MAC地址）。网络接口的物理地址通
转载
2024-09-05 15:53:03
319阅读
