文章目录1. 前言2. 安装selenium模块3. 下载浏览器驱动4. 配置浏览器驱动环境变量5. 尝试抓取数据6. 解析数据 1. 前言前几天，我写了一篇从腾讯的疫情实时追踪站点抓取数据绘制疫情地图的文章，得到了很多朋友的和支持。期间有朋友问，下面这个站点无法使用我介绍的方法抓取数据：我尝试了一下，的确不能使用常规的手段或者数据。查看网页源代码，和页面显示的内容也完全不搭调。面对这样的网
转载
2024-10-16 20:43:09
36阅读
通过构造goole翻译url来实现翻译功能的脚本、使用try-except的方式、
需要的模块： python web抓取通过： webbrowser：是python自带的，打开浏览器获取指定页面 requests：从因特网上下载文件和网页 Beautiful Soup：解析HTML Selenium：启动并控制一个W
转载
2024-01-25 13:14:07
51阅读
先说浏览器伪装，我们上网，是通过浏览器来打开网页的。这个流程已经在前面文章中简单提及，并提供了链接资料供大家学习。希望你真的去学习了，而不是等待，因为学习爬虫是个不断学习，不断实践的过程，没有捷径可走。我们现在拿浏览百度举例，我们先打开Fiddler工具(如果按照这个工具在上一篇文章中提到了)，然后打开百度网页，刷新一下，我们可以在Fiddler中看到下图中的信息：这是我们通常上网时的客
转载
2023-10-08 14:54:11
152阅读
一、日志输出到文件使用模块：logging可以生成自定义等级日志，可以输出日志到指定路径 日志等级：debug(调试日志) < info(重要信息日志) < warning(警告日志) < error(异常日志) < critical(严重错误)1、封装日志输出方法()import logging as lg
import os
class logging_():
转载
2024-02-02 07:00:38
57阅读
小编平时在家基本是下载个直播软件用盒子看直播，不过要是想看些港澳台，或者是欧美的频道就得自己找直播源了，网上网友分享的直播源很多，但是能长时间有效的少，而且清晰度也不能保证，那么问题来了，自己抓直播源可行否?经过研究，我总结了一整套秘籍，现传功给各位～这套抓直播源的方法简单易学。再也不用担心找不到自己想看的节目!一切直播频道，都可以自己抓到首先，你需要下载安装一个软件，是安装在pc端的软件，抓源过
转载
2023-08-10 12:48:12
3392阅读
# 更新 Windows 虚拟环境中的 Python：一步一步的指南
在如今的开发环境中，使用虚拟环境来管理不同项目的依赖和Python版本是非常重要的。这篇文章将详细地教你如何更新Windows虚拟环境中的Python。我们将从流程讲起，接着深入各个步骤，最后总结整个过程的要点。
## 一、更新 Python 流程概述
在进行具体操作之前，先了解一下更新 Python 的流程。下表概述了整
原创
2024-10-14 05:07:01
127阅读
文章目录前言发现宝藏一、关于python数组循环二、python面向对象编程三、math.ceil()向上取整 前言为了巩固所学的知识，作者尝试着开始发布一些学习笔记类的博客，方便日后回顾。当然，如果能帮到一些萌新进行新技术的学习那也是极好的。作者菜菜一枚，文章中如果有记录错误，欢迎读者朋友们批评指正。 （博客的参考源码可以在我主页的资源里找到，如果在学习的过程中有什么疑问欢迎大家在评论区向我提
# 在 Windows 上使用 Python 更新 SSL 库的完整指南
## 介绍
在 Python 开发中，SSL（安全套接层）协议是实现安全通信至关重要的一个部分。然而，有时我们可能需要更新 SSL 库以修复安全漏洞或使用新功能。在本文中，我将详细介绍如何在 Windows 上更新 Python 中使用的 SSL 库。
## 工作流程
要更新 SSL 库，您可以按照以下步骤进行操作：
原创
2024-10-12 05:56:28
31阅读
QA不是万能的，用户的浏览环境非常复杂，很多情况无法靠测试用例去覆盖，所以最好建立一个前端错误日志，在真实用户端收集bug。try&catch是一个捕获前端错误的常见方法，比如：{
//给所有脚本设置一个统一入口，比如设置一个init函数
init();
}catch(e){
//处理错误，将错误信息上报给服务器
}像上面这样，所有脚本统一用init作为入口，一旦发生错误就会被try捕获，
转载
2024-01-27 23:08:26
92阅读
# Python实时抓取数据更新折线图
在数据可视化领域，折线图是一种常见的展示数据趋势的方式。而在实时数据监控和更新的应用中，实时抓取数据并更新折线图是一项非常有用的功能。在本文中，我们将介绍使用Python实现实时数据抓取并更新折线图的方法。
## 准备工作
在实现实时抓取数据更新折线图之前，我们需要准备以下工具和库：
1. Python编程环境
2. 数据可视化库matplotlib
原创
2024-03-18 04:00:53
171阅读
# 如何更新Redis版本
## 介绍
在开发过程中，我们经常需要升级软件版本以获得更好的性能和安全性。本文将教你如何更新Redis版本，使你的应用程序能够充分利用Redis的新特性。
## 更新流程
下面是更新Redis版本的整个流程，我们将通过表格展示每个步骤。
| 步骤 | 描述 |
| ------ | ------ |
| 步骤一 | 下载新版本的Redis |
| 步骤二 | 备
原创
2023-10-12 11:15:25
141阅读
最近，将网站从国内网站搬移到了Lunarpage，程序转移比较简单，使用cuteftp上传上去就可以了。但是数据库转移一直都是很棘手的一个问题。本文介绍数据库转移的方法。数据库转移最简单的方法是使用DTS，但是Lunarpages数据库不支持远程数据库链接，所以无法使用DTS，因此只好使用publishing转移数据。具体步骤如下：Step1. 运行 SqlPubWiz.exe
转载
2023-12-23 17:49:32
50阅读
本文向大家描述一下当JVM异常发生时，Java虚拟机采取的几种措施，JVM异常情况在Java中被称作Error(错误)或Exception(JVM异常)，是Throwable类的子类。JVM异常捕捉的几种情况JVM异常情况在Java中被称作Error(错误)或Exception(JVM异常)，是Throwable类的子类，在程序中的原因运行时错，如对一个空指针的引用。程序使用了throw语句。当J
转载
2023-09-21 19:56:35
26阅读
使用python抓取网页(以人人网新鲜事和团购网信息为例)by 颖风斯特 BeautifulSoup, Python, urllib, 人人网, 团购 12 Comments前一段时间写的小东西，一直没工夫把他系统写出来，今天眼睛疼，就写写吧~~(原来博主不蛋疼时也会更新博客的哈~)python抓取网页基础python自己带有很多网络应用相关的模块，如：ftplib
表A中有900多万数据，根据900万数据，查询数据并插入B表创建一个定时任务，定时查询配置条件，查询更新（查询更新使用多线程）预估时间，设置请求时间跟频率
不想这么干：可以查看数据执行进度思路：设置一个运行队列 runList 里面是待执行的id设置一个失败队列 failList 里面是执行失败的id展示进度 最大id - 开始id - runList队列大小 / (最大id - 开始id)展示预
转载
2024-06-04 21:10:58
18阅读
redis安装和配置一、安装包式：1、windows环境下的redis需要去github上获取:https://github.com/MicrosoftArchive/redis/releases2、直接下载最新版本，选择.msi格式的安装版本(另外一种.zip通过命令安装)3、直接运行.msi的安装包，一直next，直到下面界面,勾选上再next4、这一步选择端口，然后next（后面可以通过配置
转载
2023-08-04 22:13:37
365阅读
https://jingyan.baidu.com/article/bad08e1eda412f09c85121c6.htmlhttps://www.dadighost.com/help/39372.html早上上班，发现电脑提示更新，按了esc键，本来以为会退出更新，谁知道自动更新起来，并且一等就快一个小时，等的我心焦。查了下，关于系统更新的时间：1、一般需要10分钟左右，主要是看更新内容的多少
转载
2023-05-18 14:16:28
179阅读
1.首先要安装pycharm 激活注册码地址:http://idea.lanyus.com/2.下载python3.6 python下载地址:https://www.python.org/downloads/3.python环境所需要搭建的包 ，把所需要的包放入python3.6目录下 链接：https://pan.baidu.com/s/
转载
2024-06-18 12:45:37
43阅读
在日常的系统管理中，保持系统安全是至关重要的一环。而对于Windows操作系统来说，定期更新补丁是一种非常重要的方式来确保系统的安全性和稳定性。如何通过Ansible工具来更新Windows补丁，是许多系统管理员关心的问题之一。
Ansible是一个自动化运维工具，可以用来管理多台计算机，自动执行命令，部署软件等。通过Ansible，可以轻松地批量更新Windows系统的补丁。
首先，要在An
原创
2024-03-20 10:19:16
235阅读
虚拟机把描述类的数据从class文件加载到内存，并对数据进行校验，转换分析和初始化，最终形成可以被虚拟节直接使用的JAVA类型，这就是虚拟机的类加载机制。类从被加载到虚拟机内存到卸载出内存的生命周期包括：加载->连接(验证->准备->解析)->初始化->使用->卸载初始化的5种情况：1.使用new关键字实例化对象时，读取或设置一个类的静态字段，除被final修饰
