ruia笔记
get_event_loop()方法仅在同样的线程中生效，如果在一个新线程中，应该用new_event_loop()来获取新的loop，并通过set_event_loop(loop)来将其设为该线程下的loop。
转载
2018-12-20 22:30:00
40阅读
2评论
什么是爬虫框架说这个之前，得先说说什么是框架：是实现业界标准的组件规范：比如众所周知的MVC开发规范提供规范所要求之基础功能的软件产品：比如Django框架就是MVC的开发框架，但它还提供了其他基础功能帮助我们快速开发，比如中间件、认证系统等爬虫流程：请求&响应解析持久化这三个流程有没有可能以一种优雅的形式串联起来，Ruia目前是这样实现的，请看代码示例： 可以看到，Item
转载
2023-09-11 18:03:40
43阅读
这篇文章的题目有点大，但这并不是说我自觉对Python爬虫这块有多大见解，我只不过是想将自己的一些经验付诸于笔，对于如何写一个爬虫框架，我想一步一步地结合具体代码来讲述如何从零开始编写一个自己的爬虫框架2018年到如今，我花精力比较多的一个开源项目算是 Ruia了，这是一个基于 Python3.6+的异步爬虫框架，当时也获得一些推荐，比如 GithubTrending
转载
2023-08-23 08:36:48
123阅读
image这篇文章的题目有点大，但这并不是说我自觉对Python爬虫这块有多大见解，我只不过是想将自己的一些经验付诸于笔，对于如何写一个爬虫框架，我想一步一步地结合具体代码来讲述如何从零开始编写一个自己的爬虫框架2018年到如今，我花精力比较多的一个开源项目算是Ruia了，这是一个基于Python3.6+的异步爬虫框架，当时也获得一些推荐，比如Github Trending Python语言榜单第
转载
2023-09-05 21:19:05
53阅读
