摘要：分布式系统需要在数据完整、一致性和性能间做平衡。本文系统介绍了处理分布式数据一致性的技术模型，如：Master-Slave，Master-Master，2PC/3PC，经典的将军问题，Paxos，以及Dynamo的NRW和VectorClock的模型。
编者按：数据服务的高可用是所有企业都想拥有的，但是要想让数据有高可用性，就需要冗余数据写多份。写多份的问题会带来一致性的问题
转载
2024-09-21 13:55:03
40阅读
为推动 AI 行业的国产化布局，迎合国产化服务器的需求，思腾合力推出这款 2U 机架式高性能服务器——CH2D20-HA，H 就是 High 的缩写代表的是高性能服务器，面向的是对数据处理有较高要求的企业级用户，这款服务器是基于 Hygon 7300 系列处理器开发的一款全新企业级高性能双路 GPU 服务器。产品规格是一款 2U 双路高端旗舰机架式 GPU 服务器，支持 2 颗海光最新一
转载
2023-09-13 23:19:19
209阅读
## 两个GPU的云服务器
近年来，随着人工智能和深度学习的迅速发展，对于处理大规模数据和复杂计算任务的需求不断增长。为了满足这些需求，云服务提供商开始提供配备多个GPU的云服务器，以提供更高的计算能力和处理效率。本文将介绍什么是两个GPU的云服务器以及如何使用它们来加速计算任务。
### 什么是两个GPU的云服务器
两个GPU的云服务器是一种提供了两个图形处理单元（GPU）的云计算实例。G
原创
2023-08-20 08:19:59
194阅读
基本命令（linux/shell）基本操作连接服务器查看GPU状态进程管理一键导出环境 / 配置环境复制/移动pip下载很慢虚拟环境condashell脚本串行调参tensorboard可视化训练过程 记录深度学习使用服务器一些常用的shell操作。 基本操作连接服务器ssh username@ipaddress (直接用命令行连接，但scp传文件等必须是linux系统，最开始安了ubuntu
（由于我装的是Ubuntu 12.04 64位 and 32位，我机子是Lenovo Y470，一块集显，一块Nvidia GT 550M，此安装方法验证成功了）1.由于之前刚安装好系统就选择安装了系统推荐的受限驱动。所以得先删除受限驱动。（如果没有装的，可以不执行这个命令）sudo apt-get purge nvidia-current
2.添加bumblebee的源
sudo add-
转载
2024-06-13 17:16:52
160阅读
屏幕显示图像的原理CPU 计算好显示内容提交到 GPU，(计算视图的创建/视图布局)GPU 渲染完成后将渲染结果放入帧缓冲区，随后视频控制器会按照 VSync 信号逐行读取帧缓冲区的数据，经过可能的数模转换传递给显示器显示。帧缓冲区只有一个，这时帧缓冲区的读取和刷新都都会有比较大的效率问题。为了解决效率问题，显示系统通常会引入两个缓冲区，即双缓冲机制所以双缓存机制GPU 会预先渲染好一帧放入一个缓
转载
2024-04-23 15:32:39
83阅读
我们在做大模型应用部署时（如训练、微调、RAG），往往需要在前期就分析好硬件选型指标，或者我们给客户报方案之前，可能你已经有了一个方案，但是由于实践经验缺乏，不知道在硬件上该如何评估并上报。本文将在这些方面给予一些参照。? 这节课会带给你什么是 GPU 以及 CUDA 核心和 Tensor 核心的介绍大模型应用中如何选择GPU和云服务厂商，追求最高性价比AI 领域的 GPU 对比如何部署自己 fi
安装cuda： 首先你需要先确定自己的显卡的型号适合的cuda toolkit.一般的做法是：控制面板，在控制面板上搜索nv,就出来英伟达的控制面板了。在控制面板中找到 系统信息 点击进入对应的界面。点击组件按钮，可以看到，支持的最新的cuda版本就是NVCUDA.DLL 文件对应的那个cuda 10到英伟达的官网下载并安装好cuda。下载cuda 10 。同时，给出各个版本的下载地址： 历史版
在现代的深度学习和大规模计算中，使用多个GPU的云服务器成为了一种趋势。这不仅可以提高计算速度，还能处理更复杂的模型。不过，用户在使用双GPU云服务器时，常常会遇到一些配置和运行方面的问题。在这篇博文中，我们将系统地分析这些问题并提供解决方案。
### 问题背景
想象一下，你正在开发一个深度学习模型，计划在云服务器上使用双GPU来加速训练过程。这是一个典型的用户场景，但在实际操作中，你遇到了一
网络互连技术及实战1.互联网概述什么是计算机网络：计算机网络就是通信线路和通信设备将分布在不同地点的具有独立功能的多个计算机系统互相连接起来，在网络软件的支持下实现彼此之间的数据通信和资源共享的系统。Osi七层模型开放系统互连参考模型简称OSI为开放式互连信息系统提供了一种功能结构的框架。Osi开放系统互连参考模型是一种协议规范，用来规范网络协议的设计与实现。引入osi参考模型的主要作用是为了实现
你在服务器上跑过代码吗？哇~你跑过！是啥样的...每回见别人跑都会问并且羡慕会在大服务器上跑代码的哈哈哈在研究生刚开学前还甚至不知道什么是服务器，更是无法想象在除了自己能看得见摸得着的电脑屏幕之外跑代码的样子。直到有天开会自己坐在了一个大大的“黑箱子”旁边才知道这就是所谓的实验室服务器哇，这不就是加大版的台式电脑的主机嘛~在犹豫和观摩了好久之后终于决定自己在实验室服务器上跑一次代码，因为自己是完全
转载
2024-03-21 21:49:37
88阅读
本文将与你分享我多年来在服务器开发方面的一些经验。对于这里所说的服务器，更精确的定义应该是每秒处理大量离散消息或者请求的服务程序，网络服务器更符合这种情况，但并非所有的网络程序都是严格意义上的服务器。使用“高性能请求处理程序”是一个很糟糕的标题，为了叙述起来简单，下面将简称为“服务器”。 本文不会涉及到多任务应用程序，在单个程序里同时处理多个任务现在已经很常见。比如你的浏览器可能就在做一些并行处
转载
2024-08-19 22:03:55
11阅读
最近碰到一个很蛋痛的问题，，我在公司的代码上实现了一个功能，然后基于这个测试，结果比对数据发现每天少三千多万条，，然后我各种优化，各种零碎部功能阉割，，还是丢数据！之后，监控运行网卡----watch -n 1 "ifconfig eth2",,,发现网卡丢数据！之后把修改之前的程序拿上来运行，发现网卡还丢！ 之后查看CPU的使用情况，top 发现有好多
一个tomcat下如何部署多个项目？Linux跟windows系统下的步骤都差不多，以下linux系统下部署为例。windows系统下部署同理。一、不修改端口，部署多个项目 清楚tomcat目录结构的应该都知道，项目包是放在webapps目录下的，那能否在同一个tomcat的webapps目录下运行多个不同项目呢？答案是可以的。1、将多个项目包放入webapps文件夹下2、修改conf下的serv
转载
2024-09-25 07:46:01
53阅读
VSFTPD学习实验一：多虚拟用户，不同的权限，用户文件夹各自独立，且只能访问自己的文件夹。需求场景模拟：1、建立两个用户，分别为ftpvip、ftpshare；2、每个用户有独立的权限，且不能互相访问各自的文件夹；3、ftpvip可以上传、下载、删除、修改和重命名等权限；4、ftpshare仅可下载文件。实验步骤：1. 添加虚拟用户口令文件[root@localhost home]#
原创
2015-03-24 21:07:48
759阅读
从零开始写一个武侠冒险游戏-6-用GPU提升性能(1)概述我们之前所有的绘图工作都是直接使用基本绘图函数来绘制的, 这样写出来的代码容易理解, 不过这些代码基本都是由 CPU 来执行的, 没怎么发挥出 GPU 的作用, 实际上现在的移动设备都有着功能不弱的 GPU(一般都支持 OpenGL ES 2.0/3.0), 本章的目标就是把我们游戏中绘图相关的大部分工作都转移到 GPU 上, 这样既可以
转载
2024-08-03 23:00:35
171阅读
1 双路 问题：常听说双路至强XX式服务器，最近又出现了双核至强，都是两个CPU，是不是双路等于双核？ 答案：不是 无论服务器的单路、双路、四路乃至八路，其中的“路”都是指服务器物理CPU的数量，也就是服务器主板上CPU插槽的数量。 最近出现的双核处理器，是在一颗物理C
计算机硬件基础笔记本，台式机，服务器 示例：dell服务器1u的服务器 4.45cm高 2u的服务器 4u的服务器 电脑主机组成一台电脑是由许许多多的零部件组成，只有这些零部件组合在一起协调的工作，才能称之为电脑。电脑发展到现在，其零部件都有了很大的变化，但其工作原理却没有变，其中包括主板、CPU、内存、硬盘、显卡、声卡等等。 电脑电源 功能：保
转载
2023-12-13 01:00:03
53阅读
之前想使用指定的GPU训练模型，查网上的帖子一般是通过设置环境变量来实现的，然后自己试了一下，在debug的时候发现无论怎么弄显示的device都是‘cuda:0’： 也没有多思考，于是就放弃了设置环境变量来指定GPU的方式，改为用以下方式来指定：device =
在这个有 4 篇文章的系列中，我们会把 Chrome 浏览器扒个精光 —— 上到浏览器的整体架构，下至页面的渲染规则。如果你对浏览器把代码变成一个具备功能的网站这件事情感到好奇，或者不确定为什么特定的技术会对页面的性能有所改进，那么强烈建议你看完这一系列。在这篇文章中（Part 1），我将介绍一些核心的计算机术语和 Chrome 的多进程架构。友情提示：如果你对 CPU/GPU 的概念很熟悉的话，
