简介
官方文档:https://splash.readthedocs.io/en/stable/install.html#linux-docker
安装Docker
yum安装docker
查看docker版本:
改为国内镜像源:
修改文件/etc/docker/daemon.json
,添加如下内容:
scrapy splash安装
安装splash镜像
映射端口
现在就可以访问splash http API了,地址为192.168.0.106:8050
。
官方文档:https://splash.readthedocs.io/en/stable/install.html#linux-docker
yum安装docker
查看docker版本:
改为国内镜像源:
修改文件/etc/docker/daemon.json
,添加如下内容:
安装splash镜像
映射端口
现在就可以访问splash http API了,地址为192.168.0.106:8050
。
scrapy_splash组件的使用学习目标了解 scrapy_splash组件的作用了解 scrapy_splash组件的使
在做爬虫的时候,大多数的网页中会存在数据动态加载的部分,而且多数都是后期渲染上的。正常情况下爬虫程序仅能爬取被渲染过的数据。因此我们看到的数据也许并非是爬虫直接获取来的。
举报文章
请选择举报类型
补充说明
0/200
上传截图
格式支持JPEG/PNG/JPG,图片不超过1.9M