python进程间传递消息 python进程间通信queue

进程间的通信

进程彼此之间互相隔离，要实现进程间通信（IPC），multiprocessing模块支持两种形式：队列和管道即Queue和Pipe这两种方式，这两种方式都是使用消息传递的。Queue用于多个进程间实现通信，Pipe是两个进程的通信，管道（不推荐使用，了解即可），这里不再赘述，实际上管道方式也不难，和Queue很相似，它的实例对象用的recv,send方法和Queue的实例对象调用的put,get作用差不多，想了解的可以去查查，这里我们只介绍Queue队列通信方式。

Queue队列通信方式

可以使用multiprocessing模块的Queue实现多进程之间的数据传递，Queue本身是一个消息列队程序。
实例对象.put() 放入数据
实例对象.get() 取出数据
实例对象.get_nowait() # 不等待

初始化Queue()对象时（例如：q=Queue()），若括号中没有指定最大可接收的消息数量，或数量为负值，那么就代表可接受的消息数量没有上限（直到内存的尽头）；
Queue.empty()：如果队列为空，返回True，反之False ；
Queue.full()：如果队列满了，返回True,反之False

简单的演示一下，程序示例：

import multiprocessing

# 创建一个队列对象,, 确定范围为3
q = multiprocessing.Queue(3)
# 往队列里面放数据
q.put("hello")
q.put(123)
q.put([1,2,3])

# 往队列里面拿数据
print("队列数据提取1:",q.get())
print("队列数据提取2:",q.get())
print("队列数据提取3:",q.get())

执行效果：

在进程间通信举例：

import multiprocessing
def demo1(q): # 见名知意
    """模拟下载数据"""
    data_code = [i for i in range(1,11)]
    # 把下载下来的数据单独放进队列之中
    print(data_code)
    for i in data_code:
        q.put(i)
    print("数据已经全部放进队列之中")

def demo2(q):
    """模拟清洗数据"""
    # 只留下偶数,放进一个列表
    list1 = []
    while True:
        i = q.get()
        if i % 2 == 0: # 清洗过程
            list1.append(i)
    # 如果队列为空,跳出循环
        if q.empty():
            break

    print(list1)

def main():
    q = multiprocessing.Queue()
    p1 = multiprocessing.Process(target=demo1,args=(q,))
    p2 = multiprocessing.Process(target=demo2,args=(q,))
    p1.start()
    p2.start()

if __name__ == '__main__':
    main()

执行效果：