使用Subprocess Popen的类库困挠了我一个月的问题终于解决了。一句话就是：等待命令返回不要使用wait()，而是使用communicate()，但注意内存，大输出使用文件。错误的使用例子之前的代码这样使用的。# 不合适的代码
def run_it(self, cmd):
p = subprocess.Popen(cmd, stdout=subprocess.PIPE, shel
转载
2023-10-15 00:05:56
43阅读
# 项目方案: 使用Python asyncio处理遇到阻塞IO的情况
## 简介
在开发中，经常会遇到需要进行IO操作的场景，如果使用传统的同步IO方式，可能会导致程序在IO操作时出现阻塞，影响程序性能。为了解决这个问题，可以使用Python的asyncio库来实现异步IO操作，避免阻塞并提高程序的性能。
## 方案概述
本项目将使用Python asyncio库来处理遇到阻塞IO的情况，通
原创
2024-06-11 06:09:03
83阅读
# 实现 Python yield for 的步骤
作为一名经验丰富的开发者，我将带领你一步步实现“Python yield for”，以帮助你更好地理解和使用yield关键字。下面是整个实现过程的步骤：
| 步骤 | 动作 |
| ---- | ---- |
| 1. | 创建一个可迭代对象 |
| 2. | 实现一个迭代器类 |
| 3. | 在迭代器类中使用yield返回数据 |
接下
原创
2024-02-01 05:45:59
46阅读
阻塞IO 传统的阻塞IO listenfd = socket(); // 打开一个网络通信端口 bind(listenfd); // 绑定 listen(listenfd); // 监听 while(1) { connfd = accept(listenfd); // 阻塞建立连接 int n =
转载
2021-08-23 11:52:21
1889阅读
阻塞IO， 当前进程因不满足一些条件，而被挂起，即阻塞，cpu改去服务其它进程， read一
原创
2023-06-01 17:19:41
112阅读
range(10))gOut[4]: <generator object <genexpr> at 0x7f3d143048e0>LOut[5]: [0, 1, 4, 9, 16, 25, 36, 49, 64, 81]...
原创
2023-01-13 06:00:37
41阅读
服务器端编程经常需要构造高性能的IO模型，常见的IO模型有四种：（1）同步阻塞IO（Blocking IO）：即传统的IO模型。（2）同步非阻塞IO（Non-blocking IO）：默认创建的socket都是阻塞的，非阻塞IO要求socket被设置为NONBLOCK。注意这里所说的NIO并非Java的NIO（New IO）库。（3）IO多路复用（IO Multiplexing）：即经典的Reac
转载
2023-07-15 16:20:57
42阅读
目录IO模型阻塞与非阻塞同步与异步阻塞IO非阻塞IO信号驱动IO多路复用IO异步IO IO模型根据各自的特性不同，IO模型被分为阻塞IO、非阻塞IO、信号驱动IO、异步IO、多路复用IO五类。 最主要的两个区别就是阻塞与非阻塞，同步与异步。阻塞与非阻塞阻塞与非阻塞最主要的区别就是程序在等待调用结果时的状态。阻塞：为了完成一个功能发起调用，如果不具备完成功能的条件，则调用会一直等待非阻塞：为了完成
转载
2023-09-25 19:23:39
60阅读
一、 什么是IO复用？ 它是内核提供的一种同时监控多个文件描述符状态改变的一种能力；例如当进程需要操作多个IO相关描述符时（例如服务器程序要同时查看监听socket和大量业务socket是否有数据到来），需要内核能够监控这许多描述符，一旦这些描述符有就绪（或者状态改变了）就告诉主动告诉进程哪些描述符 ...
转载
2021-07-23 10:57:00
819阅读
2评论
协成又称为微线程CPU是无法识别协程的，只能识别是线程，协成是由开发人员自己控制的。协成可以在单线程下实现并发的效果（实际计算还是串行的方式）。如果使用线程在多个函数之间进行上下文切换，那么这个上下文的逻辑位置是保存在CPU中的，而协程也有上下文切换的操作，但是协成的上下文逻辑位置不是通过CPU保存的，所以使用协成的好处就是更少的占用了CPU。线程之间修改共享数据时，需要锁；而协成不需要，因为协成
原创
2018-03-15 21:18:05
7478阅读
点赞
1评论
IO模型IO模型简介'''
我们这里研究的IO模型都是针对网络IO的
Stevens在文章中一共比较了五种IO Model：
* blocking IO 阻塞IO
* nonblocking IO 非阻塞IO
* IO multiplexing IO多路复用
* signal driven IO 信号驱动IO
转载
2023-08-09 17:40:21
131阅读
io介绍阻塞IOblocking IO非阻塞IOnon-blocking IO多路复用IOIO multiplexing io介绍为了更好地了解IO模型，我们需要事先回顾下：同步、异步、阻塞、非阻塞同步与异步针对的是函数/任务的调用方式：同步就是当一个进程发起一个函数（任务）调用的时候，一直等到函数（任务）完成，而进程继续处于激活状态。而异步情况下是当一个进程发起一个函数（任务）调用的时候，不会
转载
2023-08-17 15:35:06
123阅读
服务端 from socket import * server = socket(AF_INET,SOCK_STREAM) server.bind(('127.0.0.1',8080)) server.listen(3) print('server startting...') while True: conn,addr = server.accept() print(addr...
原创
2021-05-20 17:57:44
290阅读
非阻塞IO（non-blocking IO）Linux下，可以通过设置socket使其变为non-blocking，当对一个non-blocking socket执行读操作时，流程是这个样子 从图中可以看出，当用户进程发出read操作时，如果kernel中的数据还没有准备好，那么它并不会block用户进程，而是立刻返回一个error。从用户进程角度讲 ，它发起一个read操作后，并不需要等待，而
转载
2024-02-25 06:23:40
11阅读
Python高级编程和异步IO并发编程 一、协程和异步io1、并发、并行、同步、异步、阻塞、非阻塞并发： 是指一个时间段内，有几个程序在同一个cpu上运行，但是任意时刻只有一个程序在cpu上运行。并行： 是指任意时刻点上，有多个程序同时运行在多个cpu上。同步： 是指代码调用IO操作时，必须等待IO操作完成才返回的调用方式。异步： 是指代码调用IO操作时，不必等待IO操作完成就返回的调用
转载
2024-02-02 14:52:29
44阅读
事件驱动模型：有个事件队列，把事件放到队列里，然后循环这个队列，取出事件执行 5种IO模式：阻塞 I/O(blocking IO)非阻塞 I/O(nonblocking IO)I/O 多路复用(IO multiplexing)信号驱动 I/O(signal driven IO)异步 I/O(asynchronous IO)其中信号驱动 I/O 并不常用 如果进行一次读取数据，数
转载
2023-10-26 19:18:47
76阅读
一.阻塞IO介绍略（请看概念篇）二.非阻塞IO在非阻塞式IO中，用户进程需要不断的主动询问kernel数据准备好了没有 # 服务端
import socket
import time
server=socket.socket()
server.setsockopt(socket.SOL_SOCKET,socket.SO_REUSEADDR,1)
server.bind(('127.0.0
转载
2023-08-11 10:25:22
81阅读
一、问题描述 客户端接收消息的时候，如果服务端没有发送数据过来，在读取数据的时候会被阻塞，停在这步不进行下去。reader.read(chars)我调试的时候，发现，socket连接成功，并且在接收线程的地方设置断点的时候可以正常接收到消息，如果不设置断点就无法接收到消息，说明在什么地方被阻塞了。就找到是上面的原因。 在做Android开发的时候，华为P9和P9 Plus会遇到Socket方面
转载
2023-07-17 21:44:48
65阅读
阻塞与非阻塞是对于文件而言的，而不是指read、write等的属性。阻塞IO应用程序调用IO函数，导致应用程序阻塞，等待数据准备好。如果数据没有准备好，一直等待数据准备好了，从内核拷贝到用户空间，IO函数返回成功指示。读常规文件是不会阻塞的，不管读多少字节，read一定会在有限的时间内返回。一般网络、终端设备IO都是阻塞I/O。如果从终端输入..
原创
2022-09-28 17:51:14
180阅读
一 IO模型介绍为了更好地了解IO模型，我们需要事先回顾下：同步、异步、阻塞、非阻塞 同步： 同步 异步： 异步 阻塞： 阻塞 非阻塞： 非阻塞 小结： #1. 同步与异步针对的是函数/任务的调用方式：同步就是当一个进程发起一个函数（任务）调用的时候，一直等到函数（任务）完成，
而进程继续处于激活状态。而异步情况下是当一个进程发起一个函数（任务）调用的时候
转载
2024-08-24 09:41:39
71阅读
