文章目录运行协程1. asyncio.run()源码2. await 一个协程：同步执行3. await 一个任务：并发执行3.1 create_task其他event looploop.run_until_complete(future)进阶：阻塞和await区别比较asyncio.gatherasyncio.waitasyncio.sleepasyncio.shield事件循环示例1. lo
转载
2023-09-12 13:45:53
271阅读
什么是事件循环： 事件循环是每个 asyncio 应用的核心。 事件循环会运行异步任务和回调，执行网络 IO 操作，以及运行子进程。 说简单点就是由于python是单线程的 程序在执行中会将所有任务放到队列中去逐一执行，当发现阻塞时就去执行其他任务，知道程序结束。 应用开发者通常应当使用高层级的 asyncio 函数，例如 asyncio.run()，应当很少有必要引用循环对象或调用其方法。主要方
转载
2023-07-04 14:36:25
88阅读
asyncio版本支持asyncio 模块在 Python3.4 时发布。async 和 await 关键字最早在 Python3.5 中引入。Python3.3 之前不支持。关键概念event_loop 事件循环：程序开启一个无限的循环，程序员会把一些函数（协程）注册到事件循环上。当满足事件发生的时候，调用相应的协程函数。coroutine 协程：协程对象，指一个使用async关键字定义的函数，
转载
2023-09-22 21:14:25
78阅读
Python中的异步# demo.py
import asyncio
import time
# Python 协程属于可等待对象，因此可以在其他协程中被等待 Python异步非阻塞雏形
async def nested():
# time.sleep(2)
await asyncio.sleep(2)
print('我是异步内的任务，我已经完成了')
retur
转载
2023-08-30 08:27:33
77阅读
Awaitables定义： 如果一个对象可以在 await 表达式中被使用的话，那么这就是一个可等待的对象（awaitable object）.三种可等待的对象： 协程coroutines, 任务Tasks 和 期望Futures.协程 coroutines协程函数：一个由async def 定义的函数。协程对象： 通过调用协程函数所返回的对象。python协程都是可等待的（awaitable），
转载
2023-06-16 00:25:49
82阅读
# 使用 Python asyncio 实现嵌套任务
在进行异步编程时，Python 的 `asyncio` 模块是一个不可或缺的工具。它允许你在程序中并行执行多个任务，而不必等待每个任务完成。然而，对于初学者来说，嵌套任务可能会显得复杂。本文将详细讲解如何使用 `asyncio` 实现嵌套任务的步骤。
## 流程概述
下面是实现嵌套任务的步骤：
| 步骤 | 说明
1.什么是coroutinecoroutine,最早我是在lua里面看到的，coroutine最大的好处是可以保存堆栈，让程序得以继续执行，在python里面，一般是利用yield来实现，具体可以看如下文章: python中的yield以及yield from语法可以让程序支持coroutine 2.asyncio库Python3中，提供了基于coroutine的异步IO库，就
转载
2024-08-28 23:37:36
61阅读
web数据抓取是一个经常在python的讨论中出现的主题。有很多方法可以用来进行web数据抓取，然而其中好像并没有一个最好的办法。有一些如scrapy这样十分成熟的框架，更多的则是像mechanize这样的轻量级库。DIY自己的解决方案同样十分流行：你可以使用requests、beautifulsoup或者pyquery来实现。
方法如此多样的原因在于
前言这几天看asyncio相关的pycon视频又重温了asyncio 的官方文档，收获很多。之前asyncio被吐槽的一点就是文档写的不好，Python 3.7 时 asyncio 的官方文档被 Andrew Svetlov 以及 Yury Selivanov 等核心开发者重写了，新的版本我觉得已经好很多了。在这里记录一下我对asyncio的一些理解。核心概念asyncio里面主要有4个需要关注的
转载
2024-07-24 20:52:51
13阅读
asyncio 是 Python 3.4 引入的标准库，是一个基于事件循环的异步 I/O 并发库。它
原创
2023-04-29 22:28:20
506阅读
这是Flask，Sentry的作者Armin Ronacher的一篇博客，这篇文章的影响很大，后来asyncio的文档重写就是受这篇文章影响。这篇文章写于2016.10.30。而Asyncio的一个重要的PEP525（加入了async/await语法)，是2016.7.28出台的。也就是说，在PEP525之后，本文作者决定学习一下Asyncio，但是却觉得是一个
转载
2023-08-22 17:09:16
94阅读
通过上节课的学习，我们知道在进行I/O操作的时候，使用多线程与普通的单线程比较，效率有了很大的提高，既然这样，为什么还要Asyncio呢？
转载
2023-06-01 21:15:10
223阅读
异步IO 协程 是写爬虫目前来说最好的方式.比多线程和多进程都好. 开辟新的线程和进程是非常耗时的 讲讲我在使用python异步IO语法时踩过的坑简单介绍异步IO的原理以及利用最新语法糖实现异步IO的步骤,然后给出实现异步的不同例子 网上找了很多python的asyncio示例.很多都是用# 获取EventLoop:
loop = asyncio.
转载
2023-07-07 15:18:04
74阅读
# 0x00 前言之前对协程早有耳闻，但一直没有去学习，今天就来学习一下协程，再次感谢莫烦的教程。可以交给asyncio执行的任务被称为协程， asyncio 即异步的意思，在 Python3 中这是一个仅使用单线程就能达到多线程、多进程效果的工具。在单线程中使用异步发起 IO 操作的时候，不需要等待 IO 的结束，在等待 IO 操作结束的这个空当儿可以继续做其他事情，结束的时候就会得到通知，所以
转载
2023-08-11 10:59:38
69阅读
（本文主要参照Python在线文档进行学习）0.前言进程有自己独立的堆和栈，由操作系统调度；线程有独立的栈，共享堆空间，标准的线程也是由操作系统调度；协程和线程一样共享堆不共享栈，但是是由程序员在协程的代码里显示调度。协程避免了无意义的调度，进而提升性能，但也增加了程序员的责任。1.初探asyncio是一个使用 async / await 语法编写并发代码的库，在Python 3.4 引入，直接内
转载
2023-09-19 20:56:25
85阅读
目录1. Asyncio是什么？（1）Sync与Async（2）Asyncio 工作原理（3）Asyncio 用法2. Asyncio是银弹吗？3.多线程还是 Asyncio？4.小结我们来一起看下Python 并发编程的另一种实现方式——Asyncio，在处理 I/O 操作时，使用多线程与普通的单线程相比，效率得到了极大的提高。你可能会想，既然这样，为什么还需要 Asyncio？诚然，
转载
2023-08-31 19:52:22
129阅读
什么是Asyncio 多线程有诸多优点且应用广泛，但也存在一定的局限性： 比如，多线程运行过程容易被打断，因此有可能出现 race condition 的情况；再如，线程切换本身存在一定的损耗，线程数不能无限增加，因此，如果I/O 操作非常 heavy，多线程很有可能满足不了高效率、高质量的需求。 因此，Asyncio 应运而生。Sync(同步) VS Async(异步) 所谓 Sync，是
转载
2023-07-05 00:12:03
146阅读
什么是Asyncio
多线程有诸多优点且应用广泛，但也存在一定的局限性： 比如，多线程运行过程容易被打断，因此有可能出现 race condition 的情况；再如，线程切换本身存在一定的损耗，线程数不能无限增加，因此，如果I/O 操作非常 heavy，多线程很有可能满足不了高效率、高质量的需求。
因此，Asyncio 应运而生。
Sync(同步)
转载
2023-08-30 08:34:00
83阅读
在Python使用multiprocessing进行多线程和多进程操作 这篇文章中介绍了使用多线程的方式对一些I/O操作（文件读写、网络请求，这些操作不用等待其结束，在此期间可以做其他事情）进行加速。而本篇文章介绍的协程可以理解成“微线程”，不开辟其他线程，只在一个线程中执行，并且执行函数时可以被中断的一种异步执行功能。我们可以把采用线程实现的阻塞式I/O操作转化为采用协程实现地异步I/
转载
2023-07-27 20:53:23
346阅读
python的asyncio库以协程为基础，event_loop作为协程的驱动和调度模型。该模型是一个单线程的异步模型，类似于node.js。下图我所理解的该模型事件循环通过select()来监听是否存在就绪的事件，如果存在就把事件对应的callback添加到一个task list中。然后从task list头部中取出一个task执行。在单线程中不断的注册事件，执行事件，从而实现了我们的event
转载
2024-03-07 16:14:13
45阅读
