wucl202000的博客_Python

Python抓取豆瓣电影详情并提取信息

最近公司有个需求，需要爬取豆瓣上所有电影的名称。写了个脚本，爬取了豆瓣上近10000部电影的详情，包括电影的名称、导演、主演、豆瓣评分、时长、类别、简介等内容。脚本写的简陋，还有一个比较大的问题是如果爬了几次，IP会被豆瓣封掉。后续考虑加入代理来实现。#!/usr/bin/python #

爬虫

Python

原创 2017-08-30 21:33:51 3812 阅读 2点赞 1收藏 1评论

Python使用socket实现简单的文件传输并校验

因为工作需要，要在两台设备之间进行压力测试。即A设备不断往B设备发送文件，B设备接收文件后校验文件是否正确接收。用Python的socket模块写了简单的Server和Client脚本。Server负责监听端口，接收Client发来的文件并做MD5校验

文件

socket

Python

原创精选 2016-02-01 16:54:35 6453 阅读 1收藏

使用Python自动获取可用代理列表

今天闲来无事，随便写的一个从代理发布网站上提取可用代理列表的脚本。运行后，可以获取 http://cn-proxy.com/ 发布的可用代理ip和端口的列表。运行效果如下： &nbs

python 代理 BeautifulS

原创精选 2015-06-11 22:04:08 1420 阅读

Python模块之urllib

import urllib.request,urllib.parse # 引入模块remotefile=urllib.request.urlopen(remoteaddr) # 返回远端文件对象 remoteaddr='ftp://zks:%s@192.168.

Python urllib 网页

原创 2015-06-08 22:17:12 491 阅读

Python：正则表达式re模块

正则表达式是一种用预先定义的特殊字符来描述或匹配特定‘模板’的一系列字符串的一种工具。在计算机语言中，正则表达式通常被用来搜索、替换某些符合特定规则的文本。这么说太教条，估计很多人看了也不明白。通俗来讲，正则表达式就是定义了一些特殊的字符，用来表示特定的一系列具有类似特性的东西，或者用

Python re 正则表达式 regu

原创 2015-06-06 22:58:20 912 阅读

使用Python扫描端口

前几天看了个讲使用Python扫描端口的教程，看了之后自己也写了个扫描端口的脚本。记录下来，方便自己以后回顾。运行效果如下：具体代码如下，请指

端口

socket

扫描

python

原创 2015-06-04 21:27:54 2388 阅读 2点赞

使用Python爬虫爬取妹子图图片

最近在学习Python的爬虫部分。看到有网友在分享使用爬虫爬取各种网站的图片的代码，也想自己写个玩玩。今天花时间分析了一下妹子图网站的结构和HTML代码，使用urllib2和BeautifulSoup写出了一个自动下载妹子图网站图片的脚本。 &

BeautifulSoup

原创 2015-05-31 16:29:03 10000+阅读 2点赞 1评论

Python脚本自动下载小说

本人喜欢在网上看小说，一直使用的是小说下载阅读器，可以自动从网上下载想看的小说到本地，比较方便。最近在学习Python的爬虫，受此启发，突然就想到写一个爬取小说内容的脚本玩玩。于是，通过在逐浪上面分析源代码，找出结构特点之后，写了一个可以爬取逐浪上小说内容的脚本。 &

脚本

Python

BeautifulSoup

原创 2015-05-28 10:38:32 2252 阅读

Python: Windows下pip的安装及简单应用

pip是一个用来管理和下载Python包的软件。通过pip，可以很容易就联网下载并安装需要的Python包到正确的位置，是一个很有用的软件。由于自学的Python，刚开始需要下载第三方包的时候，总是被各种格式搞得头大。询问别人，别人就告诉个pip的命令，都说用这个就很方便就可以下载安装的。当时完全不知所云啊，因为看的Pyt

python

包

pip

原创 2014-07-07 20:23:45 1555 阅读 1点赞 1评论

Python: ping网段内所有ip并返回结果

今天用Python写了一段小代码，实现的功能是ping某一个网段的所有ip，然后将ping的结果提取出来，输出可以ping通的ip以及往返时间。初学Python，写得简陋，各位大侠多多指教。正则表达式请根据自己的系统进行调整，我这个是中文win7下的结果Python3.3下测试没问题ping测试的过程中内存占用较大，不知道

Python ping 局域网测

原创精选 2014-07-02 12:32:01 4320 阅读 1点赞

Python邮件相关模块之smtplib

SMTP（Simple Mail Transfer Protocol）即简单邮件传输协议，是TCP/IP协议族的一员，使用端口25.主要用于传输系统之间的邮件信息并提供来信有关的通知。import smtplib #导入SMTP模块server=smtplib.SMTP(mailserver) &nbs

Python 邮件

email

smtplib

原创 2014-06-30 08:51:13 762 阅读

Python邮件相关模块之poplib

Python 邮件

poplib

email

原创 2014-06-29 08:30:31 1298 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

载酒仗剑江湖行

Python抓取豆瓣电影详情并提取信息

Python使用socket实现简单的文件传输并校验

使用Python自动获取可用代理列表

Python模块之urllib

Python：正则表达式re模块

使用Python扫描端口

使用Python爬虫爬取妹子图图片

Python脚本自动下载小说

Python: Windows下pip的安装及简单应用

Python: ping网段内所有ip并返回结果

Python邮件相关模块之smtplib

Python邮件相关模块之poplib