一、必备的理论基础操作系统理论：操作系统是一个协调\管理\控制计算机硬件资源与应用软件资源的控制程序操作系统的两大功能:将复杂的硬件操作封装成简单的接口给应用程序或者用户去使用将多个进程对硬件的竞争变得有序二、进程理论2.1什么是进程？进程指的是一个正在进行/运行的程序，进程是用来描述程序执行过程的虚拟概念。进程的概念起源于操作系统，进程是操作系统最核心的概念，操作系统其它所有的概念都是围绕进程的
Python的高并发困扰了我很长时间。在这里我总结一下我目前粗浅的理解，欢迎大家来讨论。Python的thread并做不到真正的parallelism，因为有一个GIL(Global Interpreter Lock),所以同时只能执行一个thread的任务。对于计算量大的任务，没有必要开多个thread，因为来回切换线程也有overhead。那什么时候用呢?比如说I/O bottleneck的任
转载
2023-06-25 15:05:39
79阅读
共享内存通信原理：在内中开辟一块空间，进程可以写入内容和读取内容完成通信，但是每次写入内容会覆盖之前内容。实现方法from multiprocessing import Value,Array
obj = Value(ctype,data)
功能 ： 开辟共享内存
参数 ： ctype 表示共享内存空间类型 'i' 'f' 'c'
data 共享内存空间初始数据
返回值：共享内存对象
转载
2023-07-05 20:37:44
42阅读
在程序运行过程中，可能遇到需要进程间或不同平台的语言之间进行信息交互，存在硬盘是一种解决方案但是速度太慢。python的mmap库提供了共享内存的实践方案可以完成信息在内存间交互。简介共享内存内存共享是两个不同的进程共享内存的意思：同一块物理内存被映射到两个进程的各自的进程地址空间。这个物理内存已经被规定了大小（大小一定要比实际写入的东东大）以及名称。当需要写入时，找到内存名称，然后写入内存，等需
转载
2023-08-04 16:24:48
73阅读
********进程之间的数据共享********（了解）
展望未来，基于消息传递的并发编程是大势所趋
即便是使用线程，推荐做法也是将程序设计为大量独立的线程集合，通过消息队列交换数据。
这样极大地减少了对使用锁定和其他同步手段的需求，还可以扩展到分布式系统中。
但进程间应该尽量避免通信，即便需要通信，也应该选择进程安全的工具来避免加锁带来的问题。
以后尝试使用数据库来解决现在进程之间的
转载
2023-05-26 20:18:00
153阅读
1、同步锁 # 锁通常被用来实现对共享资源的［同步］访问。
# 为每一个共享资源创建一个Lock对象，
# 当你需要访问该资源时，调用acquire方法来获取锁对象（如果其它线程已经获得了该锁，则当前线程需等待其被释放），
# 待资源访问完后，再调用release方法释放锁：
import time
import threading
def addNum():
global num
转载
2023-12-18 17:54:30
24阅读
六种进程间通信方式的Python3.6代码实现msg_queue (消息队列)pipeline for single duplex (单工管道)pipeline for half duplex (半双工管道)name pipeline (命名管道)share memory (共享内存)semaphore (信号量)#消息队列
from multiprocessing import Process
转载
2024-05-18 22:06:14
50阅读
一、上下文切换技术简述在进一步之前，让我们先回顾一下各种上下文切换技术。不过首先说明一点术语。当我们说“上下文”的时候，指的是程序在执行中的一个状态。通常我们会用调用栈来表示这个状态——栈记载了每个调用层级执行到哪里，还有执行时的环境情况等所有有关的信息。当我们说“上下文切换”的时候，表达的是一种从一个上下文切换到另一个上下文执行的技术。而“调度”指的是决定哪个上下文可以获得接下去的CPU时间的方
转载
2024-07-10 20:23:54
31阅读
互斥量mutex 进程间也可以使用互斥锁，来达到同步的目的。但应在pthread_mutex_init初始化之前，修改其属性为进程间共享。mutex的属性修改函数主要有以下几个。 主要应用函数： pthread_mutexattr_t mattr 类型： 用于定义mutex锁的【属性】 pthrea
转载
2019-08-21 17:07:00
152阅读
2评论
进程间的同步一、进程同步_信号传递（Event）#encoding=utf-8
import multiprocessing
import time
def wait_for_event(e):#无超时等待
"""Wait for the event to be set before doing anything"""
print('wait_for_event: startin
转载
2024-07-24 06:48:48
108阅读
我们现在知道，进程之间彼此是孤立的，唯一通信的方式是队列或管道，但要让这两种方式完成进程间通信，底层离不开共享内容，这就是今天的主角：共享内存。创建共享值得方法Value
v=Value(typecode,arg1,...,argN,lock):typecode:要么是包含array模块使用的相同类型代码(如'i'、'd'等)的字符串，要么是来自ctypes模块的类型对象(例如：ctypes.c_
转载
2023-10-03 09:51:56
55阅读
1、基本概念 多个进程可以协同工作来完成一项任务，通常需要共享数据。所以在多进程之间保持数据的一致性就很重要，需要共享数据协同的进程必须以适当的策略来读写数据。同步原语和线程的库类似。 - Lock：一个Lock对象有两个方法acquire和release来控制共享数据的读写权限。  
转载
2023-05-31 23:15:39
166阅读
在Linux系统中，进程间通信（IPC）是操作系统非常重要的一部分。它允许不同的进程之间相互通信和传递数据，以实现协作和共享资源。在这个过程中，Linux提供了多种方法进行进程间同步，以确保数据的一致性和并发访问的正确性。
一、进程间同步的重要性
在多进程环境中，进程的执行是并发的，即多个进程同时运行。这就引发了一系列的问题，例如数据竞争、死锁等。为了解决这些问题，进程间必须进行同步，以协调它
原创
2024-01-30 20:37:07
196阅读
Linux操作系统是一种自由和开放源代码的操作系统，它在计算机科学领域得到了广泛的应用。在Linux系统中，进程间同步是一个非常重要的主题，因为不同进程之间需要共享资源或者协作完成某项任务。在Linux系统中，进程间同步有很多种方法，其中红帽是一种常用的解决方案。
红帽是一种Linux发行版，它是基于开源软件的企业级操作系统，并提供了广泛的支持和服务。在红帽系统中，进程间同步可以通过多种方式来实
原创
2024-02-19 13:00:42
122阅读
一、进程同步进程之间是互相独立的，其数据是不共享的，但是它们之间共享一套文件系统或打印系统，所以各进程之间会产生竞争关系，如同时运行多个进程，会造成打印错乱：from multiprocessing import Process
import time
import os
def work():
print(f'{os.getpid()} is runing')
time.sle
转载
2023-07-02 00:00:52
221阅读
python中的多线程其实并不是真正的多线程，如果想要充分地使用多核CPU的资源，在python中大部分情况需要使用多进程。Python提供了非常好用的多进程包multiprocessing，只需要定义一个函数，Python会完成其他所有事情。借助这个包，可以轻松完成从单进程到并发执行的转换。multiprocessing支持子进程、通信和共享数据、执行不同形式的同步，提供了Process、Que
转载
2023-07-01 11:48:40
105阅读
多线程中为了解决线程安全问题，一个重要的手段就是同步！所谓同步其实就是使得原本各个线程交叉执行（异步），变成排队执行（同步）。同步策略使得不同线程操作共享数据遵循“先来后到“，从而避免某个线程没有处理完数据就被另一线程抢占操作出现数据被覆盖或者脏读的情况。其中同步最常用的手段就是synchronized关键字！1、synchronized有哪些主要用法？有什么区别？synchronized主要有两
转载
2023-05-31 18:34:30
173阅读
本来只对一个应用程序内多个线程进行同步有所了解，书上也只讲了同一进程内的不同线程的同步。只是在最后说“如果需要在多个进程间的各个线程实现同步的话，可以使用互斥对象和事件对象。”
于是按照同一进程内的线程同步的思路编写不同进程之间的线程同步，用互斥对象，勉强可以实现。现将测试代码写下。
 
原创
2010-04-17 14:24:33
743阅读
进程间通信和同步半双工管道 原型：int
pipe(int filedes[2]); 实质上是创建两个文件描述符，filedes[0]用于读，filedes[1]用于写。 当写入数据的数目小于PIPE_BUF时，写入是原子的，当大于PIPE_BUF时，可能不是原子的。 如果管道是空的，那么read会被阻塞，如果管道是满的，那么write会被阻塞。命名管道 原型：int
mkfifo(const c
原创
2015-02-20 11:21:39
488阅读
目录半双工管道基本概念pipe()函数介绍pipe()函数的例子管道阻塞和管道操作的原子性管道操作原子性的代码命名管道创建FIFOFIFO操作消息队列消息缓冲区结构结构msgid_ds结构ipc_perm内核中的消息队列关系键值构建ftok()函数获得消息msgget()函数发送消息msgsnd()函数接收消息msgrcv()函数消息控制msgctl()函数消息队列的一个例子显示消息属性的函数msg_show_attr()信号量信号量数据结构新建信号量函数semget()信号量操作函数semop()控制信号
原创
2021-06-04 20:45:15
387阅读
