大家好,这里是程序员晚枫。
为了提高效率,我们在平时工作中常会用到一些Python的效率工具,Python可以实现日常工作的各种自动化。
为了更便利的开发项目,这里给大家推荐几个Python的效率工具。
1、Pandas-用于数据分析
Pandas是一个强大的分析结构化数据的工具集;它的使用基础是Numpy(提供高性能的矩阵运算);用于数据挖掘和数据分析,同时也提供数据清洗功能。
# 1、安装包
$ pip install pandas
# 2、进入python的交互式界面
$ python -i
# 3、使用Pandas
>>> import pandas as pd
>>> df = pd.DataFrame
>>> print(df)
# 4、输出结果
Empty DataFrameColumns: Index
链接:https://www.bilibili.com/video/BV1hk4y1C73S
2、Selenium-自动化登录网站
Selenium是一个用于Web应用程序测试的工具,可以从终端用户的角度来测试应用程序。通过在不同浏览器中运行测试,更容易发现浏览器的不兼容性。并且它适用许多浏览器。
可以通过打开浏览器并访问哔哩哔哩的主页做一个简单的测试:
from selenium import webdriver
import timebrowser = webdriver.Chrome(executable_path ="C:\Program Files (x86)\Google\Chrome\chromedriver.exe")
website_URL ="https://www.bilibili.com/video/BV1wA4y1D77S"
brower.get(website_URL)
refreshrate = int(3) #每3秒刷新一次网页。
# 它会一直运行,直到你停掉编译器。
while True:
time.sleep(refreshrate)
browser.refresh
3、 Flask——快速搭建网站
Flask是一个轻量级的可定制框架,使用Python语言编写,较其他同类型框架更为灵活、轻便、安全且容易上手。
Flask是目前十分流行的web框架。开发者可以使用Python语言快速实现一个网站或Web服务。
from flask import Flask
app = Flask(__name__)@app.route('/')
def hello_world:
return '程序员晚枫'
链接:https://www.bilibili.com/video/BV1p54y1C7gY
4、 Scrapy——页面爬取
Scrapy能够为你提供强大支持,使你能够精确地从网站中爬取信息。是非常实用。
现在基本上大部分开发者都会利用爬虫工具来实现爬取工作的自动化。所以编写爬虫编码时就可以用到这个Scrapy。
启动Scrapy Shell也是十分的简单:
scrapy shell
我们可以试着提取百度主页上搜索按钮的值,首先要找到按钮使用的类,一个inspect element显示该类为“ bt1”。
具体执行以下操作:
response = fetch("http://www.python4office.cn/python-office/profile/")
response.css(".bt1::text").extract_first
==> "Search"
链接:https://www.bilibili.com/video/BV1LV411m7Ym
5、 Requests——做爬虫调用
Requests是一个功能强大的HTTP库。有了它可以轻松地发送请求。无需手动向网址添加查询字符串。
除此之外还有许多功能,比如登录权限处理、网页返回内容解析、模拟用户处理等。
代码演示:
>>> r = requests.get('https://github.com/CoderWanFeng/python-office', auth=('user', 'pass'))
>>> r.status_code200
>>> r.headers['content-type']
'application/json; charset=utf8'
>>> r.encoding'utf-8'
>>> r.text'{"type":"User"...'
>>> r.json{'private_gists': 419, 'total_private_repos': 77, ...}
链接:https://www.bilibili.com/video/BV1Qa4y157RW
6、fake2excel-用于创建假数据
fake2excel是python-office里的一个功能,为您生成假数据。
有了它,你可以非常快速地生成假的names、addresses、descriptions等!
安装
pip install -i https://pypi.tuna.tsinghua.edu.cn/simple python-office -U
简单使用
import office
office.excel.fake2excel(columns=['name', 'text'], rows=20)
# 参数说明
# columns:list,每列的数据名称,默认是名称
# rows:多少行,默认是1
# language:什么语言,可以填english,默认是中文
# path:输出excel的位置,有默认值
链接:https://www.bilibili.com/video/BV1wr4y1b7uk
7、 Pillow-进行图像处理
Python图像处理工具——Pillow有相当强大的图像处理功能。当平时需要做图像处理时就可以用到,毕竟作为开发人员,应该选择功能更强大的图片处理工具。
简单示例:
from PIL import Image, ImageFilter
try:original = Image.open("http://www.python4office.cn/images/2-free-group.jpg")
blurred = original.filter(ImageFilter.BLUR)original.showblurred.showblurred.save("res.png")
except:
print "Unable to load image"
有效的工具可以帮助我们更快捷地完成工作任务,希望这7个Python的效率工具能够帮助到你。