MPI 文章目录MPI**$1 概述****$2 MPI基本函数**$2.1 `MPI_Init(int* argc, char** argv[])`$2.2 `MPI_Finalize(void)`$2.3 `MPI_Comm_size(MPI_Comm comm, int* size )`$2.4 `MPI_Comm_rank (MPI_Comm comm, int* rank)`$2.5 `
转载
2023-10-23 08:00:55
131阅读
1.OpenMPOpenMP是一种用于共享内存并行系统的多线程程序设计的库(Compiler Directive),特别适合于多核CPU上的并行程序开发设计。它支持的语言包括：C语言、C++、Fortran；不过，用以上这些语言进行程序开发时，并非需要特别关注的地方，因为现如今的大多数编译器已经支持了OpenMP，例如：Sun Compiler,GNU Compiler、Intel Compile
转载
2023-12-09 13:13:39
126阅读
基于都志辉老师《MPI并行程序设计模式》第14章内容。前面接触到的MPI发送的数据类型都是连续型的数据。非连续类型的数据，MPI也可以发送，但是需要预先处理，大概有两类方法：（1）用户自定义新的数据类型，又称派生类型（类似定义结构体类型，但是比结构体复杂，需要考虑<类型，偏移量>两方面的内容）（2）数据的打包和解包（将不连续的数据给压缩打包到连续的区域，然后再发送；接受到打包数据后，先
转载
2024-01-14 21:12:17
166阅读
1.并行编程模式-消息传递： 具有通用功能的消息传递库有PICL、PVM、PARMACS、P4、MPI等；面向特定系统定制的消息传递库有MPL、NX、CMMD等。消息传递模型的主要缺点是：要求在编程过程中参与显式的数据划分和进程间同步，因此会需在解决数据依赖、预防死锁上话费较大精力。2.MPI消息传递通信的基本概念缓存区MPI环境定义了3种缓存区： 应用缓冲区指保存将要发送或接受的数据的地址空间
转载
2023-11-06 16:52:49
62阅读
Linux是一种广泛使用的操作系统，被许多科学计算领域的研究人员和工程师所青睐。对于那些需要进行大规模计算和并行处理的应用程序来说，Linux系统提供了强大的支持。其中，Fortran编程语言和MPI（Message Passing Interface）并行计算模型是在Linux环境下进行高性能计算非常常见的工具。
Fortran是一种古老而强大的编程语言，特别适用于科学计算。许多科学家和工程师
原创
2024-04-22 10:23:48
205阅读
近期在构建一个并行程序时，踩了好几个坑，现在记录下来，用于以后查阅，如有错误的地方，请指正。 由于需要构建在windows下运行的程序，所以使用mingw进行编译。 在make过程中，报出以下错误： function 'int_ptr kind' in initialization expressi ...
转载
2021-10-02 21:43:00
587阅读
2评论
#!/bin/shbeginTime=`date +%s`# # 顺序执行，用时18秒# sh ./child/c1.shsh ./child/c2.sh# # 并
原创
2022-10-09 22:29:35
144阅读
源文件 // mpi_AxB.c #include "mpi.h" #include <stdio.h> #include <stdlib.h> #include <sys/types.h> #include <unistd.h> const int rows = 10; //the rows of ...
转载
2021-08-25 12:21:00
1928阅读
小子本文分为四部分，一是大数据时代现状，其二是面对挑战的方法，然后是用python写并行程序，最后是multiprocessing实战。
目录一、大数据时代的现状二、面对挑战的方法2.1 并行计算2.2 改用GPU处理计算密集型程序3.3 分布式计算三、用python写并行程序3.1 进程与线程3.2 全局解释器锁GIL：3.3 multiprocess
转载
2023-06-19 15:27:25
149阅读
工作中经常涉及到加速程序的运行，除了代码逻辑的优化，算法的优化之外，还经常使用的一招就是并发编程。至于python的并型编程这一块。说到并行编程，我们不得不谈线程和进程这两个概念： + 进程：对于操作系统来说，一个任务就是一个进程(Process)，熟悉linux的朋友敲命令ps -aux 就可以看到本机正在启动的任务——进程 。 + 线程：在一个进程内部(一个任务)，要同时干多件事，就需要同时运
转载
2023-07-28 14:09:41
76阅读
一、编程思想并行编程的思想：分而治之，有两种模型1.MapReduce:将任务划分为可并行的多个子任务，每个子任务完成后合并得到结果例子：统计不同形状的个数。先通过map进行映射到多个子任务，分别统计个数，然后在用reduce进行归纳一下。2.流水：将任务分为串行的多个子任务，每个子任务并行。ProductConsume例子：多个生产者进行并行，多个消费者进行并行。生产者生产出来东西放到队列里；队
转载
2024-03-06 13:32:53
22阅读
并发程序是指可以被同时发起执行的程序
并行程序被设计成可以在并行的硬件上执行的并发程序。
并发程序代表了所有可以实现并发行为的程序，它是一个宽泛的概念，其中包含了并行程序。
inter-process communication(进程间通信）
基于通信的IPC方法：又分为以数据传送为手段的IPC方法（传送字节流的管道pipe和传送结构化的消息对象的消息队列message queue）和以共享内存（
转载
2019-10-09 14:29:00
130阅读
2评论
一、概念Message Passing Interface（消息传递接口）是一种标准化的消息传递协议，用于分布式内存并行计算。二、安装（一）在 Windows 中[下载地址](Microsoft MPI - Message Passing Interface | Microsoft Learn)，找到 MS-MPI Downloads 栏，在该处下载 2 个安装包：msmpisetup.exe 和
学习了一下Linux内核配置、安装及编译，为了防止忘记，写在博客里1、Linux源代码下载下载源代码最好去官网下载，地址为：https://www.kernel.org/如果需要下载历史版本，点击网页上的https://www.kernel.org/pub/，然后选择Linux，kernel即可，比较简单。 2、配置Linux内核把源代码拷到Linux电脑里，解压，这里我下载的是linu
转载
2024-10-25 08:24:52
26阅读
线程相关总结、线程池使用经验总结！
原创
2017-12-28 16:27:48
3473阅读
1、fork/join并行执行模式的概念
2、OpenMP指令和库函数介绍
3、parallel 指令的用法
4、for指令的使用方法
5 sections和section指令的用法
1、fork/join并行执行模式的概念
OpenMP是一个编译器指令和库函数的集合，主要是为共享式存储计算机上的并行程序设计使用的。
前面一篇文章中已经试用了OpenMP的一个Parallel
转载
2013-12-13 14:58:00
154阅读
2评论
目录 基于MPI和OpenMP的并行程序设计与实现 3 一、实验目的和要求 3 二、实验内容 3 （1）使用SPMD编程模式编写求解MPI程序。 3 （2）编写求解OpenMP程序 4 <2.1>并行域并行求解 4 <2.2>使用for循环制导计算 6 <2.3>使用带reduction子句的for循环制导 7 <2.4>通过private子句和cr
1：pdb调试：基于命令行的调试工具，非常类似gnu和gdb调试，以下是常用的调试命令： 可以python -m pdb xxx.py(你的py文件名）进入命令行调试模式命令简写命令作用beakb设置断点continuec继续执行程序listl查看当前行的代码段
转载
2024-08-09 13:04:12
118阅读
CUDA并行程序设计系列是本人在学习CUDA时整理的资料，内容大都来源于对《CUDA并行程序设计：GPU编程指南》、《GPU高性能编程CUDA实战》和[CUDA Toolkit Documentation](http://docs.nvidia.com/cuda/index.html)的整理。通过本系列整体介绍CUDA并行程序设计。内容包括GPU简介、CUDA简
转载
2024-04-07 17:40:56
37阅读
Python 在程序并行化方面多少有些声名狼藉。撇开技术上的问题，例如线程的实现和 GIL，我觉得错误的教学指导才是主要问题。常见的经典 Python 多线程、多进程教程多显得偏"重"。而且往往隔靴搔痒，没有深入探讨日常工作中最有用的内容。传统的例子简单搜索下"Python 多线程教程"，不难发现几乎所有的教程都给出涉及类和队列的例子：import os
import PIL
from mu
转载
2023-11-05 17:03:17
50阅读
