selenium是一个python知名的自动化测试库,它可以执行批量化的浏览器操作,因此有些爬虫会采用selenium的方式进行开发。接下来的这篇文章小编就通过一个selenium使用示例来介绍一下python怎么使用selenium库。


第一步:python中安装selenium库

和其他所有Python库一样,selenium库需要安装

pip install selenium # Windows电脑安装selenium

pip3 install selenium # Mac电脑安装selenium


第二步:下载谷歌浏览器驱动并合理放置

selenium的脚本可以控制所有常见浏览器,在使用之前需要安装浏览器端的驱动

注意:驱动和浏览器要版本对应

推荐使用Chrome浏览器:谷歌浏览器驱动

打开chrome浏览器,在网址栏中输入chrome://version/打开关于版本页面,根据版本信息下载相应chrome驱动

python selenium库 国内镜像 python-selenium_谷歌浏览器


python selenium库 国内镜像 python-selenium_python_02

将驱动放在python的安装目录(我的python集成在Anaconda3)

python selenium库 国内镜像 python-selenium_谷歌浏览器_03


第三步:使用selenium爬取Q音乐歌词(简单示例)

import time
# 本地Chrome浏览器设置方法
from selenium import webdriver #从selenium库中调用webdriver模块
driver = webdriver.Chrome() # 设置引擎为Chrome,从本地打开一个Chrome浏览器

driver.get('https://y.qq.com/n/ryqq/songDetail/0002Pa3i2ZU2Ec') # 打开网页

time.sleep(3) # 程序暂停3秒钟,等待网页加载完毕
div_p = driver.find_element_by_id('lrc_content') # 解析网页并提取所需标签
print(div_p.text) # 打印文本
driver.close() # 关闭浏览器

python selenium库 国内镜像 python-selenium_Chrome_04

 

python selenium库 国内镜像 python-selenium_Chrome_05

 

python selenium库 国内镜像 python-selenium_Chrome_06

小结

到此这篇关于python怎么使用selenium库的文章就介绍到这了。