前言作为本人的第一篇博客，不知道怎么写才好。同时作为一个编程的菜鸟，第一次分享自己的练习之作，希望能够通过写博客这种方式慢慢的提高自己的表述能力。 本人最近学习python，学习了基本的语法，就想着做点东西练练手，反正大家说起python第一反应都是爬虫，那我就做一个爬虫吧。 本人经常由于上豆瓣看各类电影的评分，从中选出自己想要看的电影，但是豆瓣提供的几种筛选方式都不能满足，所以打算做一个爬虫
转载
2023-12-04 18:49:53
29阅读
大年初一《流浪地球》全国上映。在豆瓣评分上，首日开分站稳8分以上，延续了之前点映的高口碑。微博上跟着出现吴京客串31天与投资6000万的热搜。知乎上关于“如何评价刘慈欣小说改编的同名电影《流浪地球》”的回答引起了众多人关注，包括该片导演郭帆的最高赞回答。本篇文章爬取了豆瓣网上《流浪地球》的部分影评，并进行数据分析及可视化处理。下面是爬取分析的整个过程，让我们愉快开始吧！ 一、网页分析
转载
2024-02-05 09:16:42
42阅读
最近，由詹姆斯·卡梅隆执导的《阿丽塔：战斗天使》备受追捧。据说光特效动作就动用了三万台电脑，由800位特效工作人员同时动工，耗时两年完成。那这部电影到底讲的是什么，到底值不值得去电影院看呢（土豪请绕道）。当然，直接百度我们就可以知道值不值得看，但是作为python初学者，有必要拿这个来试试手。从豆瓣上抓取影评进行分析，由于才刚上映几天，豆瓣的影评还是比较少的，这也为我们数据的抓取节省了时间（虽说要
转载
2023-11-01 15:50:54
116阅读
{ "pages":[ "pages/index/index", "pages/logs/logs", "pages/movie/movie",//详情页 "pages/search/search",//搜索页 "pages/profile/profile" ], "window":{ "backgroundTextStyle":"l...
转载
2018-05-04 02:50:00
305阅读
/*** 正在上映电影列表* @return mixed*/public function playing_movie_list(){start=(isset(start = (is
原创
2023-02-20 10:01:46
2454阅读
在这篇博文中，我们将探讨如何解决“mongodb 豆瓣电影”相关的问题。这个问题涉及如何高效地管理豆瓣电影数据，并确保我们在使用 MongoDB 的过程中能够快速检索和更新信息。接下来，我们将详细解决过程进行记录，确保你在面对类似的情况时能得心应手。
## 问题背景
在我们开发的豆瓣电影数据抓取程序中，使用 MongoDB 作为数据存储解决方案。整个项目的目标是抓取豆瓣网上的电影信息，并在我们
本次小实验目标就是爬取豆瓣所有的电影，我们以豆瓣的分类页（https://movie.douban.com/tag/#/）作为start_urls，首要任务就是分析当前页面是否为动态加载，何为js动态加载页面可以百度一下~这里推荐一个小chrome插件—Toggle JavaScript插件，这个插件的功能就是方便地开启和关闭chrome的javascript功能。使用也很方便，点一下关
转载
2024-07-08 23:20:34
109阅读
爬虫——豆瓣电影top250无论是动态网页爬虫和静态网页爬虫，实现的思路基 本上都是获取页面 html、页面解析、数据保存或输出。虽然获取页面 html 以及数据保存都 已经封装为通用函数，但依然编写繁琐。使用爬虫框架可以很好的解决这些问题，让我们在 编写爬虫的过程中专注于页面解析，大大简化编写爬虫的工作量，并能提高爬虫运行的效率。所谓的爬虫框架，是一个半成品的爬虫，已经实现了工作队列、下载器、保
转载
2023-11-28 00:53:59
234阅读
一.python爬虫简介1.什么是爬虫：网络爬虫，是一种按照一定规则，自动抓取互联网信息的程序或者脚本。由于互联网数据的多样性和资源的有限性，根据用户需求定向抓取相关网页并分析已成为如今主流的爬取策略。2.爬虫的作用：网络抓取图片，爬取想看的视频，只要通过浏览器访问的数据都可以通过爬虫获取3.爬虫的本质：模拟浏览器打开网页，获取网页中我们想要的那部分数据二.爬取数据1.urllib模块使用impo
转载
2023-12-26 13:25:03
66阅读
Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.Beautiful Soup会帮你节省数小时甚至数天的工作时间.这是一个利器，让我们能够从复杂的HTML代码里面，提取出我们我们想要的目标数据。本章我们会以 爬取豆瓣电影成都即将上映的影片信息 作为案例讲解 Beautifu
转载
2024-02-01 21:29:01
116阅读
https://cloud.tencent.com/developer/article/1699626
原创
2023-01-16 08:14:17
353阅读
豆瓣电影api1、获取正在热映的电影：接口：https://api.douban.com/v2/movie/in_theaters?apikey=0b2bdeda43b5688921839c8ecb20399b参数：start : 数据的开始项count：单页条数city：城市如：获取 广州热映电影 第一页 10条数据：https://api.douban.com/v2/movie/in_theaters?apikey=0b2bdeda43b5688921839c8ecb20399b&a
原创
2022-02-26 17:57:42
3930阅读
获取正在热映的电影：https://douban.uieee.com/v2/movie/in_theaters访问参数：start:数据的开始项count：单页条数city：城市获取电影Top250：https://douban.uieee.com/v2/movie/top250访问参数：start:数据的开始项count：单页条数获取即将上映电影：https://douban.uieee.com
原创
2019-12-11 15:17:47
8143阅读
# 用lxml和Python爬取豆瓣电影信息
## 引言
在当今数字化的时代，越来越多的信息都可以通过互联网来获取。电影作为一种受欢迎的娱乐形式，人们经常会通过互联网来了解电影的相关信息，比如电影的评分、演员阵容、剧情简介等等。豆瓣电影作为一个知名的电影信息网站，提供了丰富的电影信息供用户查询。本文将介绍如何使用Python的lxml库来爬取豆瓣电影的信息，并展示如何使用爬取到的数据进行一些简单
原创
2023-08-20 03:51:18
87阅读
# Python豆瓣电影图表实现
## 概述
在这篇文章中，我将教会你如何使用Python实现一个豆瓣电影图表。这个图表将显示豆瓣电影中电影评分的分布情况，帮助我们更好地了解电影评分的分布情况。
## 整体流程
下面是实现“Python豆瓣电影图表”的整体流程：
| 步骤 | 描述 |
| --- | --- |
| 1 | 获取豆瓣电影数据 |
| 2 | 数据清洗和预处理 |
| 3 |
原创
2023-08-24 19:53:00
131阅读
大概是今年五月中旬左右，豆瓣对外开放的API接口不允许访问了。包括以下API接口：https://api.douban.com/v2/movie/in_theatershttps://api.douban.com/v2/movie/top250https://api.douban.com/v2/movie/coming_soonhttps://api.douban.com/v2/movie/sea
原创
2020-12-29 19:25:56
1633阅读
豆瓣电影api1、获取正在热映的电影：接口：https://api.douban.com/v2/movie/in_theaters?apikey=0b2bdeda43b5688921839c8ecb20399b参数：start : 数据的开始项count：单页条数city：城市如：获取 广州热映电影 第一页 10条数据：https://api.douban.com/v2/movie/in_theaters?apikey=0b2bdeda43b5688921839c8ecb20399b&a
原创
2021-07-14 17:39:15
5534阅读
1评论
爬取的代码如下：from selenium import webdriver
from bs4 import BeautifulSoup
import time
#发送请求，获取响应
def get_PageItem():
# 准备url
url='https://movie.douban.com/chart'
#创建一个浏览器对象
driver=webdriver.Chrome()
#
转载
2023-07-02 14:56:18
149阅读
python是解释型、面向对象的高级语言（与java不同，java需要编译生成中间状态，再运行中间状态的文件生成一个中间文件），python写完后就执行的解释型语言。 面向对象特点：封装继承和多态。 优点如下： 缺点如下：运行速度慢 代码不能加密：02第一个python程序exit()
或CTRL+z
可以退出python在命令提示符下的方式在f盘中用记事本写print(‘hello ppp’)
python爬取豆瓣电影信息并分析说在前面数据获取可视化分析结论end 说在前面对豆瓣电影top250的爬取与分析 爬虫时主要运用的库是re，request，Beautifulsoup，lxml， 分析时主要运用的是pandas，matplotlib。通过 F12 查看网页源代码，ctrl+shift+i ctrl+shift+n，检查元素，定位要爬取的信息， 这里可以右击复制xpath，用于爬
转载
2023-08-07 21:42:04
208阅读
