B站我想大家都熟悉吧，其实 B 站的爬虫网上一搜一大堆。不过纸上得来终觉浅，绝知此事要躬行，我码故我在。最终爬取到数据总量为 760万 条。准备工作首先打开 B 站，随便在首页找一个视频点击进去。常规操作，打开开发者工具。这次是目标是通过爬取 B 站提供的 api 来获取视频信息，不去解析网页，解析网页的速度太慢了而且容易被封 ip。勾选 JS 选项，F5 刷新找到了 ap
转载
2024-03-13 22:26:33
226阅读
我们今天要学习的是如何利用Python的requests库编写一个采集B站的小爬虫，都是一些很基础的内容，简单易学，没有什么太过复杂的东西，一起来看看吧。首先安装库：```bash
pip install requests
```然后，我们可以开始编写爬虫程序：```python
import requestsproxy_host = 'www.duoip.cn'
proxy_port = 800
原创
2023-11-08 15:00:37
160阅读
学完web第一站就到了Javaweb这儿，web和Javaweb之间可是有很多相通的地方，想要做出一个合格的网页，web和Javaweb一个都不能少，但你真的做好准备学习Javaweb了吗？JavaSE学会了没？MySQL数据库会编写增删改查……这些简单的SQL语句了吗？JDBC没忘吧？web前端里的HTML、CSS、JavaScript还记得吗？先别着急骂，我要是不戳戳你们的痛处，给你们喂点毒鸡
# Python爬取B站视频代码实现
## 整体流程
为了帮助你理解如何使用Python爬取B站视频，我将整个流程分解为以下几个步骤：
| 步骤 | 描述 |
| --- | --- |
| 1 | 导入所需的库 |
| 2 | 设置请求头信息，模拟浏览器行为 |
| 3 | 发送请求获取视频页面 |
| 4 | 解析视频页面，提取视频信息 |
| 5 | 下载视频 |
现在让我们一步一步
原创
2023-09-11 10:00:59
706阅读
python爬虫B站番剧B站番剧的爬取和普通视频有所不同，下面是我爬取刺客伍六七的方法一、获取视频名字像这种视频类的url不会再页面源代码里，但是我们可以看看视频的名字能不能找到。我们可以看到，在页面源代码中，我们可以找到视频的名字。然后，我就用xpath的方法将这个名字给提取了出来。def get_name(url):
resp = requests.get(url)
html
转载
2023-08-09 16:47:42
523阅读
bilibili(哔哩哔哩，又称B站)是2009年6月推出的一个AGC相关的弹幕视频分享网站，是年轻人潮流文化的娱乐社区，可能对于听过但是不经常上b站的童鞋来说，对于b站最大的影响的就是二次元、动漫、弹幕等等。但是作为国内知名的弹幕视频网站，b站已经不仅仅局限于动漫，还有着丰富的学习资源。
B站图标
作者本人常在b站搜索一些关于人工智能、机器学习类的视频资源，常常都是使用手机下载后离
转载
2024-08-25 16:33:04
335阅读
有很多文章都介绍过B站的视频如何下载，大部分介绍的都是如何通过第三方网站提供的工具下载，使用起来有诸多不便 ，也不能实现批量下载，今天就给大家介绍一款命令行小工具，保证让你爱不释手！ 这款命令行小工具的名字叫 you-get如何安装（1）运行环境这款小工具的运行，需要python3环境，python3的下载地址https://www.python.org/getit/这里给出的
转载
2024-08-27 20:09:17
528阅读
貌似现在 you-get 已经支持批量下载了。通过下面命令就可以批量下载了you-get --playlist 网址本来是带这个需求来的，看到 Venchi 的答案，装了 Python3 之后发现，那个脚本所在的网站我访问不了。我......不过我通过别的方法解决了这个问题，分享一下。用的也是 Python 3 下的 you-get，这个安装很简单，不说了。在 bilibili 上找到你想批量下载
转载
2024-06-15 10:00:38
303阅读
在当前数据驱动的时代，社交媒体评论数据的采集和分析正变得越来越重要。本篇博文将深入探讨如何使用 Python 来采集 B站评论数据，梳理出技术定位、性能指标、特性拆解、实战对比、选型指南与生态扩展等多个维度，帮助开发者从多个角度理解并实现这一功能。下面是详细的内容结构。
---
### 技术定位
在进行 B站 评论数据采集的过程中，我们首先需要明确所处的技术定位。B站 是一个充满互动与讨论的
B站评论采集。
原创
2023-05-14 09:16:30
1239阅读
我们除了爬取文本信息，有的时候还需要爬媒体信息，比如视频图片音乐等。就拿B站来说，我的收藏夹内的视频可能随时会失效，所以把它们下载到本地是非常保险的一件事。对于这种大量列表型的数据，可以猜测B站收藏夹的请求中，详细的收藏详细可能会是异步加载的，因为这部分数据可能比较庞大。我们来分析一下网络请求。可以看到对收藏夹的请求是指定URL加收藏夹的id号，我们爬取的前提是这个收藏夹是公共收藏夹，不然是无法访
作者：长行时间：2020.05.29Github原文：Week-04/Example-0404实现目标本案计划实现：通过网络请求，获取UP主发布的所有视频的信息（包括视频标题、视频播放次数），并输出到控制台。【案例应用技巧】GET请求(requests)：headers浏览器抓包(Chrome)翻页Json解析(json)实现过程当前爬虫的实现流程如
原创
2022-02-14 16:45:08
667阅读
作者：长行
实现目标
本案计划实现：通过网络请求，获取UP主发布的所有视频的信息（包括视频标题、视频播放次数），并输出到控制台。
【案例应用技巧】
GET请求(requests)：headers
浏览器抓包(Chrome)
翻页
Json解析(json)
实现过程
当前爬虫的实现流程如下：
确定数据所在的Url，以及控制翻页的参数
执行网页请求并解决请求中出现的问题
Json解析
实现翻
原创
2021-08-26 14:34:46
755阅读
Python爬虫学习基础——5分钟学会爬取B站视频日播放量排行基础包含requestspyquery进入正题 基础包含这也是我当初第一次学习爬虫时做的练习，感觉给初学者练笔挺不错的。运用的知识也不是太多，只运用了requests库以及pyquery的相关知识，就算是小白花几个小时也完全可以掌握。requestsrequests库相对于我们以前使用的urllib有着更强大的处理网页能力，大部分操作
转载
2024-07-02 18:33:39
92阅读
# 项目方案：Python 视频站 blob 采集
## 项目概述
本项目旨在使用 Python 采集视频站的 Blob 数据，以实现对视频站的数据分析、搜索、推荐等功能。通过获取 Blob 数据，我们可以获取视频站上的各种视频信息，如视频标题、时长、播放量、点赞数等。
## 技术方案
本项目将使用以下技术和工具来实现：
1. **Python**：作为主要开发语言，用于编写数据采集程序和数
原创
2023-08-01 18:26:22
597阅读
youtube-dl从名字上也能看出来，是专门用来下载 YouTube 的视频，但是除了 YouTube 之外还可以下载很多其它网站的视频，我们后续就以 bilibili 为例。首先 pip install youtube-dl，或者 pip install --upgrade youtube-dl，下载的时候自动更新。在终端中输入 youtube-dl -F url，会得到视频的信息，也可以输入
转载
2024-01-08 22:22:01
560阅读
我们经常浏览b站观看视频，遇到喜欢的时候想下载相关视频。此时，应该如何下载视频又该如何获取视频对应的字幕呢。本篇文章将具体探讨其中的步骤。希望可以帮助到有需求的童鞋。一. 视频下载说明：下载视频有多种方式，这里提供一种简便的方式。打开感兴趣的视频，获取视频的http地址
image-20201112151442498.png
在地址的前面加上 “kan” ，可以跳
转载
2024-03-14 23:55:13
9阅读
在B站学习了一周多的Java之后，现在进行一下学习总结。一、JDK和常用工具的下载安装1、JDK下载与安装B站教学视频链接如下全网最详细Win10系统JDK安装教程_哔哩哔哩_bilibilihttps://www.bilibili.com/video/BV1Q7411b7yQ?spm_id_from=333.999.0.0注意不同版本系统安装过程可能会有所不同，尽量以自己电脑系统版本为主。&nb
转载
2023-09-19 21:56:08
65阅读
腾讯课堂|Python网络爬虫与文本数据分析一、简介bsite是用于采集B站用户视频列表页、视频评论数据的python包。二、安装pipinstallbsite三、使用方法3.1初始化Bsite类登录B站后，使用开发者工具获取自己浏览器上的的cookies。获取方法可以参考京东评论实战视频frombsiteimportBsitecookies={"cookie":"登录B站后的cookies"}b
原创
2020-12-30 23:27:19
912阅读
文 | 某某白米饭来源：Python 技术「ID: pythonall」B 站，一个月活用户达到 1.72 的视频网站，有时候会因为某些未知的原因导致放入收藏夹的视频失效，为了防止视频被和谐、被失效，身为 Pythonista 来撸一个 B 站的视频下载器。分析页面首先我们在 B 站点开一个视频（https://www.bilibili.com/video/BV1Vh411Z7j5）用 F12 分
原创
2021-04-06 12:06:07
750阅读
