前言：python由于GIL（全局锁）的存在，不能发挥多核的优势，其性能一直饱受诟病。然而在IO密集型的网络编程里，异步处理比同步处理能提升成百上千倍的效率，弥补了python性能方面的短板，如最新的微服务框架japronto，resquests per second可达百万级。 python还有一
转载
2019-03-26 16:36:00
280阅读
2评论
前言：python由于GIL（全局锁）的存在，不能发挥多核的优势，其性能一直饱受诟病。然而在IO密集型的网络编程里，异步处理比同步处理能提升成百上千倍的效率，弥补了python性能方面的短板，如最新的微服务框架japronto，resquests per second可达百万级。 python还有一
转载
2019-11-19 20:30:00
151阅读
2评论
阻塞型I/O和GILCPython 解释器本身就不是线程安全的，因此有全局解释器锁（GIL），一次只允许使用一个线程执行 Python 字节码。因此，一个 Python 进程通常不能同时使用多个 CPU 核心。然而，标准库中所有执行阻塞型 I/O 操作的函数，在等待操作系统返回结果时都会释放GIL。这意味着在 Python 语言这个层次上可以使用多线程，而 I/O 密集型 Python 程序能从中
转载
2023-11-11 10:31:01
69阅读
首先，什么是异步？异步可以理解成：在当前未完成的执行流中，进行中断，转而去执行非当前执行流中的其他代码。为什么要异步？其中一个原因是耗时操作，比如io操作，要3秒返回最终结果，此时CPU干嘛呢，总不能干等着什么也不做。此时，如果把干等的时间释放出来，给其他需要执行的代码，CPU利用率就提高了。如果此时的耗时操作没有返回最终结果（比如为了拿到http请求的response），转而切到其他地方去执行，
转载
2023-08-09 19:33:45
63阅读
asyncio 和 multiprocessing 的混合编程模式在 Python 中是一种高效的并发编程方式，适用于既需要处理 I/O 绑定任务（asyncio）又需要充分利用多核 CPU 进行计算密集型任务（multiprocessing）的场景。1. 为什么要混合使用？asyncio 的局限性：asyncio 适用于 I/O 密集型任务（如网络请求、数据库操作等），但 Python 的 GI
本文深入解析Python asyncio库的高级特性，重点介绍事件循环的精细控制和使用方法。主要内容包括：1) 事
在 Python 中，asyncio 和 multiprocessing 可以结合使用，以充分利用多核 CPU 和异步 I/O 的优势。asyncio 适用于 I/O 密集型任务，而 multiprocessing 适用于 CPU 密集型任务。通过结合两者，可以在处理高并发 I/O 操作的同时，并行执行 CPU 密集型任务。1. 使用&n
晒酷学院:https://shareku.ke../!_200.png(https://s2.51cto./images/20210620/1624181120948630.png?xossprocess=image/watermark,size_14,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_
转载
2021-12-26 22:32:43
92阅读
同步IO： 一旦遇到IO操作，如读写文件、发送网络数据时，就需要等待IO操作完成，才能继续进行下一步操作异步IO： 当代码需要执行一个耗时的IO操作时，它只发出IO指令，并不等待IO结果，然后就去执行其他代码了。一段时间后，当IO返回结果时，再通知CPU进行处理消息循环： 主线程不断地重复“读取消息-处理消息” 当遇到IO操作时，代码只负责发出IO请求，不等待IO结果，然后直接结束...
原创
2021-07-12 10:51:26
180阅读
在python的异步实践中，每次看asynicio都会有新的收获，本篇总结一下最近看这个库的使用。一些核心概念异步函数的定义普通函数的定义是使用 def 关键词，异步的函数，协程函数(Coroutine)本质上是一个函数，特点是在代码块中可以将执行权交给其他协程，使用async def 来定义 async def 来定义函数 如何调用协程并且得到它的运行结果? 调用普通的函数只
转载
2023-08-30 08:17:45
108阅读
同步IO： 一旦遇到IO操作，如读写文件、发送网络数据时，就需要等待IO操作完成，才能继续进行下一步操作异步IO： 当代码需要执行一个耗时的IO操作时，它只发出IO指令，并不等待IO结果，然后就去执行其他代码了。一段时间后，当IO返回结果时，再通知CPU进行处理消息循环： 主线程不断地重复“读取消息-处理消息” 当遇到IO操作时，代码只负责发出IO请求，不等待IO结果，然后直接结束...
原创
2022-02-17 16:51:04
120阅读
1. 协程简介 1.1 协程的含义及实现方法 协程（Coroutine），也可以被称为微线程，是一种用户态内的上下文切换技术。简而言之，其实就是通过一个线程实现代码块相互切换执行。例如： def func1(): print(1) ... # 协程介入 print(2) def func2(): p
原创
2022-08-01 09:38:51
212阅读
1、为什么要用异步编程所谓同步，是指操作一个接一个地执行，下一个操作必须等上一个操作执行完成之后才能开始执行；而异
原创
2024-06-03 14:32:09
69阅读
目录文章目录目录Python 的协程asyncioEvent Loopasyncasync defasync forasync withawaitFuture 和 TaskPython 的协程Python 对协程的支持经历了多个版本：Python2.x 对协程的支持比较有限，通过 yield 关键字支持的生成器实现了一部分协程的功能但不完全。
原创
2022-02-14 14:33:43
375阅读
1. 协程 协程不是计算机提供，程序员认为创造 协程（Coroutine），也可以被称为微线程，是一种用户态内的上下文切换技术，其实就是一个线程实现代码块相互切换执行。例如： def func1(): print(1) ... print(2) def func2(): print(3) ...
原创
2021-07-21 15:40:29
171阅读
asyncio异步编程【含视频教程】 不知道你是否发现，身边聊异步的人越来越多了，比如：FastAPI、Tornado、Sanic、Django 3、aiohttp等。 听说异步如何如何牛逼？性能如何吊炸天。。。。但他到底是咋回事呢？ 本节要跟大家一起聊聊关于asyncio异步的那些事！ 视频教程： ...
转载
2021-07-28 17:14:00
175阅读
2评论
前言 如果需要并发 http 请求怎么办呢？requests库是同步阻塞的，必须等到结果才会发第二个请求，这里需使用http请求异步库 aiohttp。 环境准备 aiohttp 用于 asyncio 和 Python 的异步 HTTP 客户端/服务器。
原创
2022-03-15 17:29:10
2472阅读
1. 协程 协程不是计算机提供，程序员认为创造 协程（Coroutine），也可以被称为微线程，是一种用户态内的上下文切换技术，其实就是一个线程实现代码块相互切换执行。例如： def func1(): print(1) ... print(2) def func2(): print(3) ...
原创
2021-07-21 15:40:38
182阅读
大家好，并发编程 进入第九篇。通过前两节的铺垫（关于协程的使用），今天我们终于可以来介绍我们整个系列的重点 -- asyncio。asyncio是Python 3.4版本引入的标准库，直接内置了对异步IO的支持。有些同学，可能很疑惑，既然有了以生成器为基础的协程，我们直接使用yield 和 yield from 不就可以手动实现对IO的调度了吗？ 为何Python吃饱了没事干，老重复造轮子。这个问
原创
2020-11-22 22:16:32
167阅读
大家好，并发编程 进入第十章。为了更好地衔接这一节，我们先来回顾一下上一节的内容。上一节「Python并发编程之初识异步IO框架：asyncio 上篇（九）」中我们首先介绍了，如何创建一个协程对象.主要有两种方法通过async关键字，通过@asyncio.coroutine 装饰函数。然后有了协程对象，就需要一个事件循环容器来运行我们的协程。其主要的步骤有如下几点：将协程对象转为task任务对象定
原创
2020-11-22 22:14:37
460阅读
