努力的C的博客_Python爬虫_51CTO博客

鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

在线学习

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

51CTO博客

首页
关注
排行榜
精品课程
免费直播
软考题库

科目全、试题精、讲解专业，扫码免费刷

搜索历史清空

热门搜索

查看【】的结果
写文章
创作中心
登录注册

# Python爬虫

Python爬虫实现半自动发微博

Python实现半自动发微博【用COOKIES代替模拟登录；用WAP版微博代替网页版微博；每次还要改post数据的URL。。。半半自动的感觉】微博的内容是从糗事百科抓取的最热段子以及某网站的每日晚安。#!/usr/bin/python #coding=utf-8 import urllib import urllib2 import time import

Python

糗事百科

微博登录

原创 2016-03-18 23:30:29 1800 阅读

Python爬虫爬数据写入到EXCEL中

Python抓数据写到EXCEL中。以前都是写到txt中然后再导入到excel。现在直接写到excel中。#coding=utf-8 import xlwt import requests from bs4 import BeautifulSoup import sys reload(sys) sys.setdef

excel

Python

写到

原创 2016-03-16 11:55:46 10000+阅读

Python利用SMTP发送邮件

参照廖雪峰教程#coding=utf-8 from email import encoders from email.header import Header from email.mime.text import MIMEText from email.utils import

Python写邮件

No module nam

转载精选 2016-03-15 15:53:54 832 阅读

【更新】爬取姓名大全的名字

接上文，可以不用一个网址一个网址的输入了，能抓取页面http://www.yw11.com/namelist.php上列出的所有名字大全，不必再像上一个程序一样一个网址一个网址的输入了。嘿嘿。#coding=utf-8 import urllib2 import re from bs4 import BeautifulSoup import&nbs

爬虫爬姓名

自动爬取

原创 2016-03-11 23:20:51 1698 阅读

【更新】比较智能的爬取姓名

接前面的博文，前面不好控制抓取的页数，现在可以较好的控制~~看看代码#coding=utf-8 import urllib,urllib2 import re from bs4 import BeautifulSoup import time import sys reload(sys) sys.setd

爬虫

自动

下一页

原创 2016-03-11 21:51:43 763 阅读

爬昵称网站昵称

项目需要继续爬点昵称~~~先上代码#coding=utf-8 import urllib,urllib2 import re from bs4 import BeautifulSoup import time import sys reload(sys) sys.setdefaultencoding('u

爬虫

爬昵称

原创 2016-03-11 19:23:40 1440 阅读

爬姓名大全网站的姓名

#coding=utf-8 import urllib2 import re from bs4 import BeautifulSoup import sys reload(sys) sys.setdefaultencoding('utf-8') def getHtml(url):

爬虫

爬姓名

原创 2016-03-11 13:12:03 1086 阅读

Python爬虫爬数据写入到文件

#coding=utf-8 import requests from bs4 import BeautifulSoup import sys reload(sys) sys.setdefaultencoding('utf8') r=requests.get('http://html-color-codes.inf

文件

Python

写数据

原创 2016-03-07 23:21:11 4524 阅读

Python爬取拉勾网招聘信息

最近自学研究爬虫，特找个地方记录一下代码。就来到了51cto先测试一下。第一次发帖不太会。先贴个代码。首先打开拉勾网首页，然后在搜索框输入关键字Python。打开抓包工具。因为我的是MAC os，所以用的自带的Safari浏览器的开启时间线录制。通过抓取post方法，可以看到完整url=http://www.lagou.com/jobs/positionAjax.json?然后可以发现post的数

爬虫

Python

勾网数据

原创 2016-03-07 21:46:52 2134 阅读