阻塞型I/O和GILCPython 解释器本身就不是线程安全的，因此有全局解释器锁（GIL），一次只允许使用一个线程执行 Python 字节码。因此，一个 Python 进程通常不能同时使用多个 CPU 核心。然而，标准库中所有执行阻塞型 I/O 操作的函数，在等待操作系统返回结果时都会释放GIL。这意味着在 Python 语言这个层次上可以使用多线程，而 I/O 密集型 Python 程序能从中
转载
2023-11-11 10:31:01
69阅读
https://www.bilibili.com/video/BV1g7411k7MD?from=search&seid=13649975876676293013 import asyncio import random #需求:有一个crontab调度器，每隔1秒，拉起1个job，要求这些job可
原创
2021-08-25 14:47:07
999阅读
import asyncio #携程（携程不是函数） async def print_hello(): while True: print("hello world") await asyncio.sleep(1) #暂停1s async def print_goodbye(): while Tru
原创
2021-08-25 14:47:13
407阅读
在python的异步实践中，每次看asynicio都会有新的收获，本篇总结一下最近看这个库的使用。一些核心概念异步函数的定义普通函数的定义是使用 def 关键词，异步的函数，协程函数(Coroutine)本质上是一个函数，特点是在代码块中可以将执行权交给其他协程，使用async def 来定义 async def 来定义函数 如何调用协程并且得到它的运行结果? 调用普通的函数只
转载
2023-08-30 08:17:45
108阅读
目录文章目录目录Python 的协程asyncioEvent Loopasyncasync defasync forasync withawaitFuture 和 TaskPython 的协程Python 对协程的支持经历了多个版本：Python2.x 对协程的支持比较有限，通过 yield 关键字支持的生成器实现了一部分协程的功能但不完全。
原创
2022-02-14 14:33:43
375阅读
前言 如果需要并发 http 请求怎么办呢？requests库是同步阻塞的，必须等到结果才会发第二个请求，这里需使用http请求异步库 aiohttp。 环境准备 aiohttp 用于 asyncio 和 Python 的异步 HTTP 客户端/服务器。
原创
2022-03-15 17:29:10
2472阅读
前言：python由于GIL（全局锁）的存在，不能发挥多核的优势，其性能一直饱受诟病。然而在IO密集型的网络编程里，异步处理比同步处理能提升成百上千倍的效率，弥补了python性能方面的短板，如最新的微服务框架japronto，resquests per second可达百万级。 python还有一
转载
2019-03-26 16:36:00
280阅读
2评论
一些随笔理解一些名词（简单的说，具体定义可百度）并发（concurrency）：同一时间段内执行多个任务,但是在同一时刻你只可以执行一个任务。并行（parallellism）：同一时刻执行多个任务。同步异步关注的是消息通信机制同步（Synchronous）：调用方必须等待这个调用返回结果才能继续执行。异步（Asynchronous）：调用方不会立刻得到结果，而是调用发出后调用者可以继续后续的操作，
转载
2023-07-07 15:16:03
100阅读
前言：python由于GIL（全局锁）的存在，不能发挥多核的优势，其性能一直饱受诟病。然而在IO密集型的网络编程里，异步处理比同步处理能提升成百上千倍的效率，弥补了python性能方面的短板，如最新的微服务框架japronto，resquests per second可达百万级。 python还有一
转载
2019-11-19 20:30:00
151阅读
2评论
下面我们使用Python来实现并发的Web Server，其中采用了多进程、多线程、协程、单进程单线程非阻塞的方式。 一、使用子进程来实现并发Web Serverimport socket
import re
import multiprocessing
def handle_request(new_socket):
# 接收请求
recv_msg = ""
转载
2023-07-04 22:02:28
447阅读
这是Flask，Sentry的作者Armin Ronacher的一篇博客，这篇文章的影响很大，后来asyncio的文档重写就是受这篇文章影响。这篇文章写于2016.10.30。而Asyncio的一个重要的PEP525（加入了async/await语法)，是2016.7.28出台的。也就是说，在PEP525之后，本文作者决定学习一下Asyncio，但是却觉得是一个
转载
2023-08-22 17:09:16
94阅读
通过上节课的学习，我们知道在进行I/O操作的时候，使用多线程与普通的单线程比较，效率有了很大的提高，既然这样，为什么还要Asyncio呢？
转载
2023-06-01 21:15:10
223阅读
注意并发指的是任务数多余CPU核数,通过操作系统的各种任务调度算法,实现用多个任务,"一起"执行(实际上总有一些任务不在执行,因为切换任务的速度相当快,看上去一起执行而已)并行指的是任务数小于等于cup核数, 即任务真的是一起执行的线程Python的thread模块是比较 底层的模块, Python的threading模块是对thread做了一些包装的, 可以更加方便的被使用1 使用threadi
转载
2023-07-28 23:47:46
99阅读
aiohttp介绍官网上有这样一句话介绍：Async HTTP client/server for asyncio and Python翻译过来就是 基于asyncio和Python实现的异步HTTP客户端/服务器asyncio可以实现单线程并发IO操作。也就是做异步操作。如果仅用在客户端，发挥的威力不大。如果把asyncio用在服务器端，例如Web服务器，由于HTTP连接就是IO操作，因此可以用
转载
2023-12-12 15:49:10
32阅读
一、什么是epoll我们在 Python多种方式实现并发的Web Server 的最后使用单进程+单线程+非阻塞+长连接实现了一个可并发处理客户端连接的服务器。他的原理可以用以下的图来描述：解释：1.HTTP服务器是我们使用 单进程+单线程+非阻塞+长连接实现 的web服务器。2.在实现的时候，我们创建了一个存放已接受Socket连接的列表，该列表是在应用程序的内存空间中的。如图中深蓝色部分3.当
转载
2023-10-11 08:37:59
154阅读
Python高级编程和异步IO并发编程一、多线程、多进程和线程池编程1、GIL gil global interpreter lock （全局解释器锁）python中一个线程对应于c语言中的一个线程 （cpython）gil使得同一个时刻只有一个线程在一个cpu上执行字节码, 无法将多个线程映射到多个cpu上执行GIL主动释放的情况： gil会根据执行的字节码行数以及时间片释放gil gil在遇到
转载
2023-12-14 11:01:53
69阅读
一、前言在Python开发中，服务部署有各种各样的方案，同时作为服务端语言也是比较吃力的，没有Java那样有很成熟的方案。在这里介绍一个高并发部署方案：Systemd+Nginx+Gunicorn+Gevent+Supervisor+Flask。众所周知 Flask 是一个同步的框架，处理请求的时候是以单进程的方式，当同时访问的人数过多时，Flask 服务就会出现阻塞的情况。就像我们买火车票一样，
转载
2021-05-17 08:17:00
267阅读
前面学习了socket的相关知识，但是只能处理单线程的，当然我们也可以使用python多线程模块实现多线程并发，python中socketserver模块实现了并发相关操作，本文主要记录一下学习过程。服务端代码如下：#1、自定义一个类#2、在类中重写handle方法(该方法中实现自己业务逻辑)importsocketserverclassMyserver(socketserver.BaseRequ
转载
2024-01-23 20:12:57
46阅读
1.单线程tornado.web：基础web框架模块tornado.ioloop：核心IO循环模块，高效的基础。封装了:1.asyncio 协程，异步处理2. epoll模型：水平触发（状态改变就询问，select(),poll()）， 边缘触发（一直询问，epoll()）3.poll 模型：I/O多路复用技术4.BSD（UNIX操作系统中的一个分支的总称）的kqueue（
转载
2023-08-19 16:30:09
272阅读
目录1. Asyncio是什么？（1）Sync与Async（2）Asyncio 工作原理（3）Asyncio 用法2. Asyncio是银弹吗？3.多线程还是 Asyncio？4.小结我们来一起看下Python 并发编程的另一种实现方式——Asyncio，在处理 I/O 操作时，使用多线程与普通的单线程相比，效率得到了极大的提高。你可能会想，既然这样，为什么还需要 Asyncio？诚然，
转载
2023-08-31 19:52:22
129阅读
