import reimport requestsclass BiliBi(): def GetIndex(self): url = 'https://www.bilibili.com/video/av1415913
原创
2023-02-21 09:01:22
116阅读
最近受人之托研究了下b站的数据爬取做个小工具，最后朋友说不需要了，本着开源共享的原则，将研究成果与大家分享一波，话不多说直接上干货需求分析给定up主uid和用户uid，爬取用户在该up主所有视频中发的所有弹幕需求拆解获取up主所有视频打开b站，随便搜索一个up主，打开所有视频页面，f12看异步请求就一目了然了接口地址:https://space.bilibili.com/ajax/member/g
转载
2024-05-27 17:53:06
270阅读
# 用 Python 抓取 B 站 留言的框架与实践
随着视频网站的普及，许多用户在观看视频时都会留下自己的评论和反馈。在B站（哔哩哔哩）这个以弹幕文化而著称的平台上，用户的留言和评论是构成其社区文化的重要一部分。借助 Python 的强大功能，我们可以轻松抓取这些评论，以便进一步的分析和研究。
## 选择合适的框架
要抓取 B 站的留言，Python 有多个库和框架可以选择。其中最常用的包
原创
2024-08-16 07:41:35
62阅读
JavaScript 抓取B站用户资料的过程包含多个步骤，每个步骤都涉及不同的技术和原理。在这篇博文中，我将复盘整个过程，涵盖备份策略、恢复流程、灾难场景、工具链集成、案例分析及扩展阅读，帮助你更好地理解如何有效地进行操作。
### 备份策略
备份策略是确保抓取到的数据不会丢失的关键环节。这里有一个简单的备份流程图，以及存储介质的对比表。
```mermaid
flowchart TD
前面通过python爬虫爬取过图片，文字，今天我们一起爬取下b站的小视频，其实呢，测试过程中需要用到视频文件，找了几个网站下载，都需要会员什么的，直接写一篇爬虫爬取视频~~~分析b站小视频1、进入到抓取链接地址http://vc.bilibili.com/p/eden/rank#/?tab=%E5%85%A8%E9%83%A8 2、分析抓取链接内容通过F12或者抓包工具进行查看我们需
转载
2024-08-27 23:09:59
231阅读
1.前言由于前段时间在B站看到我关注的一个程序员UP主爬取了自己所有视频下的所有评论并录入到数据库里，进行了一波分析。我就觉得挺有意思的，而且那时候我还不太会爬虫。正巧，赶上这机会，学习学习爬虫。2.分析样例视频：https://www.bilibili.com/video/BV1V44y1T7mY?spm_id_from=444.41.0.0首先要先看看B站的评论是用哪种方式显示出来的。用F12
转载
2023-06-27 10:44:34
439阅读
1、背景众所周知，越实时的数据越有价值。直播、推荐、审核等领域中有越来越多的场景需要近实时的数据来进行数据分析。我们在探索和实践增量数据湖的过程中遇到许多痛点，如时效性、数据集成同步和批流一体的存储介质不统一的问题。本文将介绍我们针对这些痛点所进行的思考与实践方案。1.1 时效性痛点传统数仓以小时/天级分区，数据完整才可查。然而，一些用户并不需要数据完整，只需要最近的数据做一些趋势分析。因此，现状
出于某些不可告人的特殊原因，我需要得到某个B站视频的字幕，于是写下了这段爬虫~
转载
2021-07-06 09:44:59
4841阅读
文章目录一．准备工作1．工具二．思路1．整体思路2．爬虫思路三．分析网页1.分析网页加载方式2.分析数据接口3.获取oid四．撰写爬虫五．存储数据六．总结 你爱我，我爱你，蜜雪冰城甜蜜蜜…最近被蜜雪冰城的宣传洗脑了，相关视频播放量很高，b站视频评论区都是人才说话好听，写个爬虫爬取一下b站评论区用户信息和评论内容。（修改于2021-06-25）一．准备工作1．工具（1）Chrome 谷歌浏览器 安
转载
2023-12-03 17:43:00
1159阅读
无需配置 Cookie，包含评论点赞数等字段
原创
2022-03-11 09:39:21
6499阅读
在学习过程中会不断更新注意：笔记是为了学习，只记需要的即可，没必要每句话都记下，必要时可自己延申若笔记可能出现对其理解不深入，不完整，甚至也会出现错误有问题的地方，希望大家谅解、留言提出指正，同时也欢迎大家来找我一起交流学习！ctrl + / 是多行注释
1.
print(" * " * 4)
print(" * * " * 4)
print(" *
转载
2023-07-04 23:22:44
55阅读
大家好，我是轻风。 B 站，作为 Z 世代的新式社交性学习平台，对我来说一直只是一个学习的好去处，学习这事儿肯定是我留在 B 站的唯一原因… 如果你非要问我为什么之前一直在循环播放“听狄胖的话”，那我也只能告诉你是我不小心点了鬼畜区，想知道小元芳是不是真的有许多问号…我承认是我真的太年轻了，对知识总是太饥渴…好了，这一篇儿可以翻过了，下面说点正经的… 我 Python 学习的很多视频都是在 B 站
转载
2023-07-05 09:46:48
138阅读
如图，bilibili的评论主要分为根评论（顶级评论）和子评论（回复评论），名称我乱说的哈哈，这里的顶级评论就是最顶级的意思，他不是任何评论的回复评论，bilibili前端显示也没有那种层层递进，但我相信表的结构设计肯定是有所体现的红色为顶级评论，蓝色为子评论 1.表结构设计废话不多说，首先是表结构的设计，一般评论应该有的属性字段我就不说了，这里主要考虑说明的是根评论与子评论（回复评论）是一个表还
转载
2024-03-10 12:00:19
126阅读
python爬虫B站番剧B站番剧的爬取和普通视频有所不同，下面是我爬取刺客伍六七的方法一、获取视频名字像这种视频类的url不会再页面源代码里，但是我们可以看看视频的名字能不能找到。我们可以看到，在页面源代码中，我们可以找到视频的名字。然后，我就用xpath的方法将这个名字给提取了出来。def get_name(url):
resp = requests.get(url)
html
转载
2023-08-09 16:47:42
523阅读
B 站也就是哔哩哔哩，是国内最大的二次元视频网站之一，喜欢看动漫的人估计没几个不知道的。我虽然看视频不多，但现在基本想看视频就直接去 B 站了。刚开始知识看看动漫，或者电影解读之类的，后来无意中发现了关于 SAS 的视频教程之后，让我对 B 站开始好奇，这种二次元网站怎么会有这么古老的语言的视频教程呢，而且质量还很高。随着我不断的深挖，我发现 B 站简直就是一个宝藏啊。什么二次元什么动漫，只是冰山
转载
2023-07-05 09:38:07
93阅读
这篇文章主要介绍了Python爬虫爬取Bilibili弹幕过程解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下先来思考一个问题，B站一个视频的弹幕最多会有多少？比较多的会有2000条吧，这么多数据，B站肯定是不会直接把弹幕和这个视频绑在一起的。也就是说，有一个视频地址为https://www.bilibili.com/video/av67946
转载
2023-09-28 21:12:21
191阅读
Bilibili视频投稿经验前言投稿设置网页投稿流程创建视频合集投稿到视频合集创建视频列表删除投稿 前言本文介绍在Bilibili进行视频投稿的流程与经验，帮助各位新人UP。内容包含投稿设置、正常投稿流程、创建视频合集、投稿到视频合集、创建视频列表、删除投稿、等内容。传送门： B站主页：链接 B站投稿页面（创作中心）：链接投稿设置在B站主页点击投稿进入创作中心，点击创作设置，即可进入创作设置页面
转载
2023-10-12 16:44:38
108阅读
bilibili用户信息爬虫0. 成果1. 环境开发环境服务器客户端管理程序语言C++11C++11C++11开发环境Linux/vim/xmakeVS2017VS2017+Qt5.12运行环境LinuxWindows / LinuxWindows其他环境配置项值数据库MySQL-8.0.20客户端是在Windows下开发的，但是代码可以直接放到到Linux上编译运行。管理程序是在Windows下
转载
2023-07-04 23:24:30
251阅读
在这篇博文中，我们将探讨如何利用 Python 实现对 B站（哔哩哔哩）的爬取工作。我们会从协议背景入手，逐步深入到抓包方法、报文结构、交互过程、性能优化和逆向案例，详细记录每个步骤。
## 协议背景
B站作为一个广受欢迎的视频分享平台，其背后的网络协议并不复杂。为了更好地理解 B站的数据交互过程，我们需要先了解其所使用的通信协议。
### 关系图 + 文字描述
我们可以通过关系图来展示
# 使用Python抓取B站评论的完整指南
在这篇文章中，我们将学习如何使用Python抓取B站（哔哩哔哩）上的评论。这个过程对于新手开发者来说可能有些复杂，但只要按照步骤进行，就会变得简单易行。我们将按照以下步骤来实现这个任务：
| 步骤 | 说明 |
|------|------|
| 1 | 确定抓取的评论内容和目标视频 |
| 2 | 设置开发环境，安装所需库 |
| 3
