背景用 Python 的 requests 模块爬取 金十数据 首页中间部分的资讯信息，练习了两种处理过程：写入 MySQL 数据库和词云分析，对比之下 Python 几行代码就能完成 MySQL入库，真是太简洁了！环境准备用到的 python 库有：PILjiebarequestswordcloudpymysql本机环境为 python 3.6 ，发现有些库如 wordcloud 使用 pip
转载
2024-01-15 09:05:29
227阅读
利用python中的库和函数设计一个爬取读书网中“软件与程序设计”栏的程序，并对其书名制作词云图，下载其书封面存储到本地文件中。 构建多个函数分别进行网页的请求，html的获取，所需数据的解析与爬取，词云图的构建，数据文件的存储，以及构建一个类对书图片进行下载存储。 所需的python库有：import time
import requests
import json
from lxml impo
转载
2024-08-14 01:17:42
140阅读
下面使用Python开发一个网页爬虫，爬取百度百科词条信息，整个程序涉及到url管理器，html下载器，html解析器，html显示以及调度程序：程序结构：spider_main.py：爬虫的调度程序url_manager.py：爬虫URL管理器，维护两个set，一个为将要爬取信息的url，一个为已经爬取过的urlhtml_downloader.py：html下载器html
转载
2024-08-20 18:49:19
440阅读
如果你懒得看下边的文字，我录了一个完整的教学视频在b站上。我的B站教学：https://www.bilibili.com/video/av75377135?p=2工作原理b站是提供弹幕接...
原创
2021-07-07 11:12:15
402阅读
点赞
如果你懒得看下边的文字，我录了一个完整的教学视频在b站上。我的B站教学：https://.bilibili.com/video/av75377135?p=2工作原理b站是提供弹幕接...
原创
2022-03-14 16:58:50
10000+阅读
很早之前写过一篇怎么利用微博数据制作词云图片出来，之前的写得不完整，而且只能使用自己的数据，现在重新整理了一下，任何人的微博数据都可以制作出来，即使是Python小白也能分分钟做出来。准备工作本环境基于Python3，理论上Python2.7也是可行的，先安装必要的第三方依赖包：# requirement.txt
jieba==0.38
matplotlib==2.0.2
numpy==1.13.
转载
2023-12-19 23:38:59
62阅读
很早之前写过一篇怎么利用微博数据制作词云图片出来，之前的写得不完整，而且只能使用自己的数据，现在重新整理了一下，任何的微博数据都可以制作出来，放在今天应该比较应景。一年一度的虐汪节，是继续蹲在角落默默吃狗粮还是主动出击告别单身汪加入散狗粮的行列就看你啦，七夕送什么才有心意，程序猿可以试试用一种特别的方式来表达你对女神的心意。有一个创意是把她过往发的微博整理后用词云展示出来。本文教你怎么用Pytho
转载
2023-06-27 11:24:03
118阅读
如果你懒得看下边的文字，我录了一个完整的教学视频在b站上。我的B站教学：https://www.bilibili.com/video/av75377135?p=2
工作原理b站是提供弹幕接口的，所以我们的整体操作进行如下：到B站获取cid将cid与网站固定格式进行链接用python请求网页进行简单的单词处理生成词云接下来我们就按照刚才说的顺序进行详细解释
操作顺序
1.到B站获取cid首先
原创
2022-03-14 16:57:57
10000+阅读
就这么简单!Python爬取脚本之家生成词云江一脚本之家在工作生活中，当我们遇到想展示关键词的场合时，用词云的方式展示是一个不错的方法。但是如何去实现词云呢？理论上，通过中文分词技术可以得到高频词列表，通过词云图的方式对排名靠前的高频词进行呈现，将出现频次越高的词语，设置更大的字号。这样的可视化展示方式，不仅直观，而且美观。那么如何快速生成一个词云呢？一些在线的词云生成平台可以快速生成词云，但是有
原创
2021-03-25 08:59:43
359阅读
如果你懒得看下边的文字，我录了一个完整的教学视频在b站上。我的B站教学：https://www.bilibili.com/video/av75377135?p=2工作原理b站是提供弹幕接口的，所以我们的整体操作进行如下：到B站获取cid将cid与网站固定格式进行链接用python请求网页进行简单的单词处理生成词云接下来我们就按照刚才说的顺序进行详细解释操
原创
2021-07-12 17:35:44
6173阅读
前言在很早之前写过一篇怎么利用微博数据制作词云图片出来，之前的写得不完整，而且只能使用自己的数据，现在重新整理了一下，任何的微博数据都可以制作出来，一年一度的虐汪节，是继续蹲在角落默默吃狗粮还是主动出击告别单身汪加入散狗粮的行列就看你啦，七夕送什么才有心意，程序猿可以试试用一种特别的方式来表达你对女神的心意。有一个创意是把她过往发的微博整理后用词云展示出来。本文教你怎么用Python快速创建出有心
转载
2024-01-01 08:08:36
88阅读
在前段时间看了杰昆菲尼克斯的小丑电影，心里很好奇大部分观众看完这部电影之后对此有什么评价，然后看了看豆瓣短评之后，觉得通过python把短评中出现最多的单词提取出来，做成一张词云，看看这部电影给观众们留下的关键词是什么。
原创
2019-10-23 18:47:44
10000+阅读
点赞
上期为大家介绍了requests库的基本信息以及使用requests库爬取某东的商品页，收到了很多同学的反馈说期待猪哥的更新，猪哥感到非常开心，今天就带大家来玩一把刺激的！一、需求背景在实际开发过程中，在我们动手开发之前，都是由产品经理为我们（测试、前端、后端、项目经理等）先讲解一下需求，我们了解了需求之后，才开始一起来讨论技术方案。我们自己实现一些小功能时同样需要讨论需求，也就是告诉别人...
原创
2022-04-13 17:09:45
1367阅读
爬取评论生成词云
原创
2018-06-09 16:17:23
3379阅读
前言微博大家都很熟悉了，时不时就谁谁上了热搜，底下评论什么都有，我们想获得评论信息做个简单的分析，可以用爬虫爬取，但花费的时间可能有点多，还会面临反爬，微博给我们开了 api 接口，我们可以调用方便的获取数据，带来了不少便利，小编带大家来爬取评论内容api 配置https://open.weibo.com/打开，注册一个账号，按照下列序号新建应用，完善基本信息点击【我的应用】，完善基本信息完善后的
原创
2021-01-02 14:09:07
2357阅读
导入：最近突然觉得，在生活中可以看到很多与词云类似的图片，（不知道是不是我的个性化广告，哈哈哈）总之，闲来无事，自己也写一个代码来生成词云。 用什么数据来生成呢？再三回忆，突然想起了之前有一个网络流行词的网站： 小鸡词典 里面不仅有热词，还有对应的解释，以及点赞数，这次的主要目的不是爬虫而是词云，所以我会用点赞数来作为对应热词的值。分析及代码：首先打开网站首页用开发者工具抓包并构造请求头：head
转载
2023-10-10 19:24:51
2阅读
前一段时间学校有个project，做一个电影购票系统，当时就用springboot做了系统，用python抓了一些电影的基本信息。后来发现如
原创
2022-08-24 14:15:37
365阅读
前言 PK创意闹新春，我正在参加「春节创意投稿大赛」，详情请看：春节创意投稿大赛”， 昨天看到了的春节征文活动，最近刚好在看爬虫，就爬取一下春节祝福语，生成个词云玩一玩，大家有兴趣可以试试，会奉上
原创
2022-04-12 14:49:44
816阅读
一 . Java爬取B站弹幕 弹幕的存储位置 如何通过B站视频AV号找到弹幕对应的xml文件号 首先爬取视频网页，将对应视频网页源码获得 就可以找到该视频的av号aid=8678034 还有弹幕序号，cid=14295428 弹幕存放位置为 http://comment.bilibili.com/1
原创
2021-06-04 20:08:46
517阅读
前言emmmm 没什么说的，想说的都在代码里环境使用Python 3.8 解释器 3.10Pycharm 2021.2 专业版selenium 3
原创
2022-05-29 07:31:16
455阅读
