1.什么是coroutinecoroutine,最早我是在lua里面看到的，coroutine最大的好处是可以保存堆栈，让程序得以继续执行，在python里面，一般是利用yield来实现 python中的yield以及yield from语法可以让程序支持coroutine 2.asyncio库Python3中，提供了基于coroutine的异步IO库，就是asynciohtt
转载
2024-06-26 11:02:38
39阅读
Python中的异步# demo.py
import asyncio
import time
# Python 协程属于可等待对象，因此可以在其他协程中被等待 Python异步非阻塞雏形
async def nested():
# time.sleep(2)
await asyncio.sleep(2)
print('我是异步内的任务，我已经完成了')
retur
转载
2023-08-30 08:27:33
77阅读
1、理解概念asyncio 是用来编写并发代码的库，使用 async/await 语法。(1)何为并发：并发就是在一个时间段内，同时做多个事情。比如在单CPU的机器中（只有一个CPU的机器），我们可以一边听歌，一边斗地主，一边聊QQ。在我们看来，我们是同时在做这三件事，可是在单CPU中，这并不是同时进行的。单CPU把自己分成了一段一段的时间片，每个时间片用来做一个事情。如果该时
转载
2023-08-04 19:51:15
262阅读
利用爬虫我们可以获取大量的价值数据，从而获得感性认识中不能得到的信息，比如：1.爬取数据，进行市场调研和商业分析。爬取知乎优质答案，为你筛选出各话题下最优质的内容。 抓取房产网站买卖信息，分析房价变化趋势、做不同区域的房价分析。爬取招聘网站各类职位信息，分析各行业人才需求情况及薪资水平。2.作为机器学习、数据挖掘的原始数据。比如你要做一个推荐系统，那么你可以去爬取更多维度的数据，做出更好的模型。3
转载
2024-01-08 17:47:22
62阅读
python3学习之路-爬虫篇一、前期准备1.安装python3.7.3 开发环境2.安装pyCharm开发工具3.掌握python基本语法二、爬虫原理三、爬虫所需要的第三方库1、requests库2、 beautifulSoup库3、lxml库四、正则表达式1.一般字符2.预定义字符集3.数量词4.边界匹配5.re模块及其方法四、使用API五、数据库存储1、NoSql数据库分类2、mongoD
转载
2023-12-04 15:19:37
47阅读
如何选择教材，好的开始是成功的一半，选择一本优秀的教材是事半功倍的关键因素。因此我们需要去百度或者知乎等平台看看大家是如何选购学习教材的，寻找最合适自己的学习资料;书本的选购完成后，我们需要查看是否有配套的视频教程，可以通过百度或者去某些平台购买实时授课，这样在学习过程中遇到的问题就可以得以解答;书和视频已搞定，那就是环境配置了，PC平台的环境配置以及库的安装，对于能否成功运行Python文件，有
转载
2024-04-11 15:27:13
19阅读
目录楔子创建一个协程并执行多个协程合作Task 与 Future执行任务调用常规函数call_sooncall_latercall_at以上三者的执行顺序多个task并发执行asyncio.waitasyncio.gatherasyncio.as_completed同步原语锁事件队列协程与线程结合关于 async with 和 async forasync withasync forawait手动
转载
2023-10-31 19:54:39
27阅读
目的：学习笔记目标网站：https://www.zhihu.com1.首先我们打开目标网站：2.首先我们试着爬取下来一篇文章的评论，通过搜索发现在 response里面我们并没有匹配到评论，说明评论是动态加载的。3.此时我们清空请求，收起评论，再次打开评论4.完成上面操作后，我们选择XHR，可以发现点击评论的时候发送了3个请求。5.我们点击带comments的请求，然后在response里搜索可以
转载
2023-07-04 17:59:39
1479阅读
python的asyncio库以协程为基础，event_loop作为协程的驱动和调度模型。该模型是一个单线程的异步模型，类似于node.js。下图我所理解的该模型 事件循环通过select()来监听是否存在就绪的事件，如果存在就把事件对应的callback添加到一个task list中。然后从task list头部中取出一个task执行。在单线程中不断的注册事件，执行事件，从而实现了我们的eve
Python作为程序员的宠儿，得到了越来越多人的关注，使用Python进行应用程序开发的越来也多。那么，Python有哪些高大上的项目？这里有十个：1.NuPIC它是一个以HTM学习算法为工具的机器智能平台。HTM是皮层的精确计算方法。HTM的核心是基于时间的持续学习算法和储存和撤销的时空模式。NuPIC适合于各种各样的问题,尤其是检测异常和预测的流数据来源。2.Hebel它是在Python语言中
转载
2023-09-11 20:41:01
89阅读
# Python3 asyncio 日志记录
## 介绍
在编写异步程序时，调试和日志记录是非常重要的。Python中的`asyncio`模块提供了一个强大的工具集，可以帮助我们在异步代码中进行日志记录。本文将介绍如何在Python3中使用`asyncio`进行日志记录，并提供一些示例代码。
## asyncio 的日志记录
`asyncio`模块允许开发者使用标准的Python日志记录库
原创
2024-01-05 04:48:39
792阅读
一、python简介1、python下载地址：https://www.python.org/downloads/Python的创始人为Guido van Rossum。1989年圣诞节期间，在阿姆斯特丹，Guido为了打发圣诞节的无趣，决心开发一个新的脚本解释程序，做为ABC 语言的一种继承。之所以选中Python（大蟒蛇的意思）作为程序的名字，是因为他是一个叫Monty Python的喜剧团体的
转载
2023-08-06 15:48:42
363阅读
这是一篇 Python 入门指南，针对那些没有任何编程经验，从零开始学习 Python 的同学。不管你学习的出发点是兴趣驱动、拓展思维，还是工作需要、想要转行，都可以此文作为一个参考。在这个信息爆炸的时代，以 "Python入门” 为关键字搜索出的结果成千上万。不少小白选手难免会东一榔头西一棒槌，最终看了很多文章，却仍没跨过新手那道门槛。结合自身的学习经验以及与很多自学者的沟通了解，我们整理出一条
转载
2023-07-23 19:05:58
0阅读
学python，我们要首先问自己，是为了转行？提升自己？还是什么，有了明确的目标，才会沉下心来学习。我学习python的目标是想要转行，可以跟大家分享一下我的学习之路。有鹿不闻：Python学习日记——写在前面zhuanlan.zhihu.com在明确了学习目的、学习方向（转行方向）我们就可以学习具体的基础知识，刷一遍基础知识就可以使用第三方库，做一些爬虫、数据分析等项目，下面我具体说一下，列一点
转载
2024-01-21 00:19:24
126阅读
协程#coding:utf-8#协程的学习'''我觉得异步和同步的最大的特点就是可以挂起释放资源给其他协程，这样看似还是同步，但是却可以同步需要阻塞的时候的冏况'''import timeimport asyncio# 定义异步函数async def hello(): print('Hello World 000:%s' % time.time()) ...
原创
2021-11-16 14:41:46
403阅读
Python3异步IO--asyncioasyncio是Python3.4版本引入的标准库，直接内置了对异步IO的支持。asyncio的编程模型就是一个消息循环。我们从asyncio模块中直接获取一个EventLoop的引用，然后把需要执行的协程扔到EventLoop中执行，就实现了异步IO。用asyncio实现Helloworld代码如下：importasyncio@asyncio.corout
转载
2018-07-19 16:00:31
2296阅读
言归正传，我来给大家介绍一下这套教程，希望每个小伙伴都沉迷学习，无法自拔！本套教程学习时间15天1-3天内容：为Linux基础命令4-13天内容：为Python基础教程14-15 天内容：为飞机大战项目演练第一阶段（1-3天）：该阶段首先通过介绍不同领域的三种操作系统，操作系统的发展简史以及Linux系统的文件目录结构让大家对Linux系统有一个简单的认识，同时知道为什么要学习Linux命令。然后
转载
2023-12-28 15:39:59
147阅读
项目 开发语言的选择一般会以项目需求为依据，而转换使用另一种开发语言则需要更大的决心，特别是开发团队已经熟悉了某种开发语言之后。现在越来越多的开发团队将项目的开发语言从 Python 转换成 Go，因为他们发现 Python 除了在几个特定领域具有一定优势外，Go 语言则具有更为出色的表现。以下就是从 Python 转成 Go 的几个理由。理由1、性能Go 语言执行起来非常快，其性能与 C 或 C
转载
2023-12-04 16:43:08
118阅读
有很多人正在入门Python爬虫，学习Python爬虫。在这个过程中，会遇到很多难题，许多小伙伴都会去寻找答案，但是因为答案的纷繁复杂和种类多样，往往要花上好些时间。而码不理经常会在知乎上寻找学习问题的答案，里面的解答也会对自己起到很大的帮助。所以码不理决定通过整理知乎上关于Python爬虫的精彩回答文章和教程，制作一篇关于Python爬虫的索引，包括：入门指南 - 教程资源 - 框架工具 - 爬
转载
2024-01-29 20:31:32
88阅读
最近学习了一点网络爬虫，并实现了使用Python来爬取知乎的一些功能，这里做一个小的总结。网络爬虫是指通过一定的规则自动的从网上抓取一些信息的程序或脚本。我们知道机器学习和数据挖掘等都是从大量的数据出发，找到一些有价值有规律的东西，而爬虫则可以帮助我们解决获取数据难的问题，因此网络爬虫是我们应该掌握的一个技巧。Python有很多开源工具包供我们使用，我这里使用了requests、Beautiful
转载
2023-08-25 13:49:18
237阅读
