工作中经常涉及到加速程序的运行，除了代码逻辑的优化，算法的优化之外，还经常使用的一招就是并发编程。至于python的并型编程这一块。说到并行编程，我们不得不谈线程和进程这两个概念： + 进程：对于操作系统来说，一个任务就是一个进程(Process)，熟悉linux的朋友敲命令ps -aux 就可以看到本机正在启动的任务——进程 。 + 线程：在一个进程内部(一个任务)，要同时干多件事，就需要同时运
转载
2023-07-28 14:09:41
76阅读
小子本文分为四部分，一是大数据时代现状，其二是面对挑战的方法，然后是用python写并行程序，最后是multiprocessing实战。
目录一、大数据时代的现状二、面对挑战的方法2.1 并行计算2.2 改用GPU处理计算密集型程序3.3 分布式计算三、用python写并行程序3.1 进程与线程3.2 全局解释器锁GIL：3.3 multiprocess
转载
2023-06-19 15:27:25
149阅读
一、编程思想并行编程的思想：分而治之，有两种模型1.MapReduce:将任务划分为可并行的多个子任务，每个子任务完成后合并得到结果例子：统计不同形状的个数。先通过map进行映射到多个子任务，分别统计个数，然后在用reduce进行归纳一下。2.流水：将任务分为串行的多个子任务，每个子任务并行。ProductConsume例子：多个生产者进行并行，多个消费者进行并行。生产者生产出来东西放到队列里；队
转载
2024-03-06 13:32:53
22阅读
并发程序是指可以被同时发起执行的程序
并行程序被设计成可以在并行的硬件上执行的并发程序。
并发程序代表了所有可以实现并发行为的程序，它是一个宽泛的概念，其中包含了并行程序。
inter-process communication(进程间通信）
基于通信的IPC方法：又分为以数据传送为手段的IPC方法（传送字节流的管道pipe和传送结构化的消息对象的消息队列message queue）和以共享内存（
转载
2019-10-09 14:29:00
130阅读
2评论
【1】C#中允许进行加密System.Security.Cryptography;varaesM=newAesManaged();varmd5M=MD5.Create();
原创
2018-09-26 21:02:53
569阅读
线程相关总结、线程池使用经验总结！
原创
2017-12-28 16:27:48
3473阅读
C# .NET Parallel
原创
2018-09-26 21:06:56
336阅读
1、fork/join并行执行模式的概念
2、OpenMP指令和库函数介绍
3、parallel 指令的用法
4、for指令的使用方法
5 sections和section指令的用法
1、fork/join并行执行模式的概念
OpenMP是一个编译器指令和库函数的集合，主要是为共享式存储计算机上的并行程序设计使用的。
前面一篇文章中已经试用了OpenMP的一个Parallel
转载
2013-12-13 14:58:00
154阅读
2评论
1：pdb调试：基于命令行的调试工具，非常类似gnu和gdb调试，以下是常用的调试命令： 可以python -m pdb xxx.py(你的py文件名）进入命令行调试模式命令简写命令作用beakb设置断点continuec继续执行程序listl查看当前行的代码段
转载
2024-08-09 13:04:12
118阅读
并行与并发的区别并行 - parallel同时做某些事情，可以互不干扰的同一时刻做几件事情并行：是一条高速路上的多条车道，每条车道上可能同时有车辆在跑，是同时发生的概念并发 - concurrency同时做某些事情，但是一个时间段内有事情要处理并发：是众多车辆在一个时间内要通过路面的时间，比如下班时一大波人向食堂涌去，抢购时一大波请求向服务端涌去如何处理并发？1、队列、缓冲区打菜时排队，先进先出，
转载
2023-12-24 20:18:29
39阅读
Python 在程序并行化方面多少有些声名狼藉。撇开技术上的问题，例如线程的实现和 GIL，我觉得错误的教学指导才是主要问题。常见的经典 Python 多线程、多进程教程多显得偏"重"。而且往往隔靴搔痒，没有深入探讨日常工作中最有用的内容。传统的例子简单搜索下"Python 多线程教程"，不难发现几乎所有的教程都给出涉及类和队列的例子：import os
import PIL
from mu
转载
2023-11-05 17:03:17
50阅读
Python 在程序并行化方面多少有些声名狼藉。撇开技术上的问题，例如线程的实现和 GIL，我觉得错误的教学指导才是主要问题。常见的经典 Python 多线程、多进程教程多显得偏"重"。而且往往隔靴搔痒，没有深入探讨日常工作中最有用的内容。传统的例子简单搜索下"Python 多线程教程"，不难发现几乎所有的教程都给出涉及类和队列的例子：import os
import PIL
from mu
转载
2024-04-11 09:10:24
24阅读
CUDA并行程序设计系列是本人在学习CUDA时整理的资料，内容大都来源于对《CUDA并行程序设计：GPU编程指南》、《GPU高性能编程CUDA实战》和[CUDA Toolkit Documentation](http://docs.nvidia.com/cuda/index.html)的整理。通过本系列整体介绍CUDA并行程序设计。内容包括GPU简介、CUDA简
转载
2024-04-07 17:40:56
37阅读
1 并发与并行并发是指在某个时间段内，多任务交替处理的能力。并行是指同一时刻处理多任务的能力。在并发环境下，由于程序的封闭性被打破，出现了以下特点：1)并发程序之间有相互制约的关系。 直接制约体现为一个程序需要另一个程序的计算结果，间接制约体现为多个程序竞争共享资源，如处理器、缓冲区等。2)并发程序的执行过程是断断续续的。 程序需要记忆现场指令及执行点。3)当并发数设置合理并且CPU拥有足够的处理
转载
2024-06-03 08:49:18
15阅读
# 项目方案：基于Python并行程序调用GPU的应用
## 1. 背景介绍
在现代计算机科学领域，GPU（图形处理器）不仅仅用于图形处理，还广泛应用于高性能计算（HPC）和深度学习等领域。Python作为一门流行的编程语言，能够方便快捷地调用GPU进行并行计算。本项目将介绍如何利用Python并行程序调用GPU，并提供一个示例项目。
## 2. 技术方案
### 2.1 使用CUDA库
C
原创
2024-05-09 05:32:46
300阅读
并发与并行并发：是指在某个时间段内，多任务交替的执行任务。当有多个线程在操作时，把CPU运行时间划分成若干个时间段,再将时间段分配给各个线程执行。 在一个时间段的线程代码运行时，其它线程处于挂起状。并行：是指同一时刻同时处理多任务的能力。当有多个线程在操作时，cpu同时处理这些线程请求的能力。所以在并发环境下，程序的封闭性被打破，出现以下特点：并发程序之间有相互制约的关系。直接制约体现为一个程序需
转载
2023-08-09 11:53:54
152阅读
CUDA存储器模型： GPU片内：register，shared memory； host 内存： host memory, pinned memory. 板载显存：local memory,constant memory, texture memory, texture memory,global
转载
2017-07-24 21:57:00
251阅读
点赞
1评论
在C/C++中使用OpenMP优化代码方便又简单，代码中需要并行处理的往往是一些比较耗时的for循环，所以重点介绍一下OpenMP中for循环的应用。个人感觉只要掌握了文中讲的这些就足够了，如果想要学习OpenMP可以到网上查查资料。 工欲善其事，必先利其器。如果还没有搭建好omp开发环境的可以看一下OpenMP并行程序设计——Eclipse开发环境的搭建 首先，如何使一段代码并行处理呢
转载
2019-01-01 17:19:00
632阅读
2评论
春节坐在回家的火车上百无聊赖，偶然看到 Parallelism in one line 这篇在 Hacker News 和 reddit 上都评论过百的文章，顺手译出，enjoy:-)Python 在程序并行化方面多少有些声名狼藉。撇开技术上的问题，例如线程的实现和 GIL传统的例子简单搜索下“Python 多线程教程”，不难发现几乎所有的教程都给出涉及类和队列的例子：#Example.py
''
转载
2024-08-12 10:04:18
43阅读
OpenMP并行程序设计（一） OpenMP是一个支持共享存储并行设计的库，特别适宜多核CPU上的并行程序设计。今天在双核CPU机器上试了一下OpenMP并行程序设计，发现效率方面超出想象，因此写出来分享给大家。 在VC8.0中项目的属性对话框中，左边框里的“配置属性”下的“C/C++”下的“语言”页里，将OpenMP支持改为“是/（OpenMP）”就可以支持OpenMP了。 先看一个简单的...
转载
2007-12-17 10:29:00
163阅读
