上次发了一篇文章，题目叫做《Python使用cookielib和urllib2模拟登陆新浪微博并抓取数据》，里面的代码请不要怀疑，我测试过它是
原创
2023-02-07 00:58:22
61阅读
1评论
微博模拟登陆1.基类对象的方法
建立一个类
__init__初始化方法,接收username和password。class launcher():
def __init__(self, username, password):
self.password = password
self.username = username2.定义一个函数，目的用于取到no
转载
2023-06-13 12:01:37
91阅读
本文转自：http://www.jb51.net/article/44779.htm1、主函数（WeiboLogin.py）import urllib2
import cookielib
import WeiboEncode
import WeiboSearch
if __name__ == '__main__':
 
转载
精选
2014-09-06 22:15:29
3195阅读
点赞
2评论
由于最近没事在学python，正好最近也想趴下新浪微博上边的一些数据，在这里主要爬去的是一个人的粉丝具体信息（微博昵称,个人介绍，地址，通过什么方式进行关注），所以就学以致用，通过python来爬去微博上边的数据。首先先说下环境啊，使用的是python3.5，然后使用的框架有：requests：用来获取html页面。BeautifulSoup：用来进行html的解析，是一个在python爬虫中非常
转载
2024-10-24 16:58:05
72阅读
代码<!DOCTYPE html><html lang="en" ng-app="app"><!-- 引入控制程
原创
2022-01-21 11:43:05
67阅读
最近花了不少时间来学python爬虫，觉得还是有很多问题的，比如说requests.get获得Pixiv的网页源代码，一直获取不到，不过我猜测大概是headers的问题，准备之后处理。 废话少说我们先来讲一讲模拟登陆微博的问题。第一步:用Chrome来抓包打开微博(https://www.weibo.cn,这个是手机微博的网址，之所以用这个网址，是因为源代码少，方便分析)点击登陆 在这里按F1
转载
2024-07-03 08:44:34
68阅读
代码<!DOCTYPE html><html lang="en" ng-app="app"><!-- 引入控制程序 --><head> <meta charset="UTF-8"> <title>双向数据绑定--调色板</title> <script type="text/javascript" ...
原创
2021-07-17 14:13:50
175阅读
本文承接上一篇爬虫开篇的说明----上一篇已经很好的用到了reqquests,Beautifulsoup等库，以及爬虫的常用更简单框架；本篇内容的目的是充分的认识scrapy 框架的各个组件，以及利用scrapy 框架实现微博的爬取开篇之前，先来概览一下scrapy 框架的架构scrapy 架构1. Engine 引擎，触发事务，是整个框架的核心部分2.scheduler 调度器，将引擎发来的请求
转载
2023-12-05 15:23:26
38阅读
最近由于需要一直在研究微博的爬虫，第一步便是模拟登陆，从开始摸索到走通模拟登陆这条路其实还是挺艰难的，需要一定的经验，为了让朋友们以后少走点弯路，这里我把我的分析过程和代码都附上来。首先，我们先用正常的账号登陆，具体看会有些什么请求。这里我用的是Http Analyzer抓包(Filders也是一个不错的选择)。下面是正常登陆流程的截图：接下来我会详细说明各个过程。第一步：预登陆。现在微博、空间等
这里用到的库有两个import requests
import re登陆时首先要获取此时的session来维持对话，post请求时还需要请求头headdef postLoginsession():
# 请求登陆的页面
url = "https://passport.csdn.net/account/login"
#请求头
headers = {
'U
转载
2023-06-20 16:27:11
109阅读
新浪微博模拟登陆过程:过程说明:1.登陆 weibo.com ，这一步的主要目的是获取新浪微博的一个名字为ssologin.js的 js 脚本文件，在weibo.com的页面中连接为 http://js.t.sinajs.cn/t35/miniblog/static/js/sso.js?version=8818b2c42b785af9 。该脚本文件中包含了整个登陆过程，同时包含了 RSA加密算法，
原创
2013-05-20 20:20:35
6693阅读
点赞
10评论
2023年马哥最新原创：用python爬取千条微博签到数据。
一、爬取目标大家好，我是 @马哥python说，一枚10年程序猿。今天分享一期python爬虫案例，爬取目标是新浪微博的微博签到数据，字段包含：页码,微博id,微博bid,微博作者,发布时间,微博内容,签到地点,转发数,评论数,点赞数经过分析调研，发现微博有3种访问方式，分别是：PC端网页：h
转载
2023-07-17 21:12:24
172阅读
### Java模拟微博登录的完整解析与实践
在进行Java模拟微博登录的过程中，我们需要解决多个技术问题，包括版本兼容性、配置调整、依赖库适配等。这篇文章将全面记录这个过程。
#### 版本对比
首先，我回顾了不同版本之间的演进。在这个过程中，我观看了时间轴上各个版本的变迁与兼容性分析，如下所示：
```mermaid
timeline
title Java模拟微博登录版本演进史
近年来，随着我国人民生活水平不断提高，明星们的生活也不是那么高不可攀。因此，粉丝们对于明星们结婚的消息，越来越接受，胡歌的粉丝们，还整天担心胡歌找不到对象，每到情人节，一想到他孤单一人，倍觉难受。 正所谓有结婚，就必然有离婚和出轨，例如薛之谦、刘恺威、林丹，都是典型案例。这不，近期没有啥好作品，还说自己演技比群众高一个珠峰，还上了吐槽大会的李小璐，不甘寂寞也和PGONE整了一出夜宿
原创
2021-02-01 14:29:56
418阅读
# 用Python发布微博文章的科普文章
在现代社交媒体的浪潮中，通过编程与社交平台互动，已经成为了一种炙手可热的技能。本文将介绍如何使用Python语言，通过微博API发布文章。尽管许多用户通过移动设备直接发布内容，但使用编程语言进行自动化和批量处理，可以极大提升工作效率。
## 一、了解微博API
首先，微博提供了强大的API接口，供开发者和程序员利用这些接口进行各种操作，包括获取用户信
原创
2024-09-22 03:59:04
202阅读
虽然微博官方有Python SDK，但是下载链接竟然失效了？？在Pypi找到一个库——weibo，貌似还不错 安装weibo库 pip install weibo 报错 “ERROR: Command errored out with exit status 1: python setup.py e
转载
2020-01-17 22:40:00
384阅读
2评论
用python爬取微博并不是一件简单的事情，但通过一些步骤，我们可以有效地配置环境、编译程序、进行参数调优、定制开发、调试技巧以及安全加固。接下来就一起来看看具体的解决方案。
### 环境配置
首先，我们需要为爬虫准备好环境。我们来说说具体的流程。可以按照以下流程图来进行理解：
```mermaid
flowchart TD
A[准备爬虫环境] --> B[安装Python]
首先，需要下载新浪微博的SDK，这里附上地址下载完了之后解压，然后打开myeclipse，新建项目，再把刚才解压出来的Import到项目中。如图所示： 接下来，到这个网址http://open.weibo.com/注册应用。有三种应用，选择站内应用，然后创建应用。把该填写的都填写上。确认就ok。需要注意的是有两点：1，是注册完应用，会有App Key以及App Secret，这个接下来会用到。2
转载
2023-11-15 10:19:11
69阅读
1.设置ROBOTSTXT_OBEY，由true变为false
2.设置DEFAULT_REQUEST_HEADERS，将其改为request headers
3.根据请求链接，发出第一个请求，设置一个start_request方法，并在方法中定义相关的配置,比如在本例中设置搜索的关键字keyword
4.接下来定义一个链接，也就是start_url，本例中改为search_url,其中把base
转载
2023-05-31 08:39:53
125阅读
前段时间开始学习Python，一直想不到有什么好的小项目可以做，憋得慌，这不， 绞尽脑汁想出了一个爬取新浪微博，并对爬取数据做简单统计的项目。一开始我自以为学习了点Python正则就可以搞定了，熟料在机器登陆上栽了跟头，从完全一头雾水到现在初步登陆获取到数据，整整历经了四五天。因为之前没搞过机器登陆方面的代码，所以这次项目的初步完成完全归功于网上的一些大神，我只是拾人牙慧，拼凑了几个大神的代码
转载
2023-12-26 09:46:39
59阅读
