看这篇文章之前大家可以先看下我的上一篇文章：cookies详解本篇我们就针对上一篇来说一下cookies的基本应用使用selenium模拟登陆百度 from selenium操作很简单，这里不做详解讲解，以后我们开爬虫基础系列文章的时候会讲到。selenium保存cookies cookies 这里切记，如果我们要使用json.load读取数据，那么一定要使用json.dump来写入数据，
目录一、Cookie二、创建 Cookie 三、服务器获取 Cookie四、修改Cookie值1、方案一2、方案二 五、浏览器查看 Cookie1、谷歌浏览器查看 Cookie： 2、火狐浏览器查看 Cookie：六、Cookie 生命控制七、Cookie的path属性一、Cookie1、Cookie 是服务器通知客户端保存键值对的一种技术。2、客户端有了 Cooki
转载
2023-07-20 18:19:19
75阅读
上一篇博客，我写了python自动化框架的一些知识和粗浅的看法，在上一篇中我也给自己提出一个需求：如果记录在测试过程中接口的调用情况？提出这个需求，我觉得是有意义的。你在测试过程中肯定会遇到一些莫名其妙的问题，比如：web某个页面一直在刷进度条，导致你定位元素失败，但是，你再手动操作一遍可能无法复现....对于我们来说，肯定会遇到许多类似的问题。你会发现有时候仅仅靠一张截图，你远远找不到bug的原
什么是iframe？<iframe> 标签是一个内联框架，即用来在当前 HTML 页面中嵌入另一个文档的，且所有主流浏览器都支持iframe标签。简单说，就是在一个页面内，又嵌入了一个页面，看似是一个页面，但是在selenium中，无法对iframe内元素进行直接定位示例： 打印出网易云音乐-云音乐热歌榜中前10首歌曲名我们先定位出排行榜中前10首歌曲的元素简单说一下，为什么使用红色
转载
2024-08-02 21:42:16
42阅读
文章目录response概述（1）什么是reponse?‘（2）reponse对象response-设置响应行设置响应头response-重定向**（1）什么叫重定向？（2）重定向的核心方法1方法二response实现自动刷新跳转response-设置响应体getWriter()方法getOutputstream()方法浏览器访问Servlet显示图片超链接访问文件Response中应注意的细节
转载
2024-05-05 21:10:11
39阅读
# 深入了解Java的响应式编程
在当今的软件开发领域，响应式编程已经成为一种流行的编程范式。它通过异步数据流的方式处理事件和数据，并且能够很好地应对高并发的情况。在Java中，`Reactive Streams` 标准提供了一种实现响应式编程的方法，而 `Project Reactor` 则是基于这一标准的一个强大的库。
## 什么是响应式编程？
响应式编程是一种面向数据流和变化传播的编程
原创
2024-07-09 05:12:31
11阅读
# Java Respon包装：一种优雅的API响应封装方式
在Java开发中，经常会涉及到API接口的开发与调用。而在API接口的返回结果中，我们经常希望以一种统一的格式来封装返回数据，以便前端或其他系统能够更容易地处理这些数据。在这种情况下，我们通常会使用一种叫做Respon包装的方式来封装API的响应结果。本文将介绍Java中Respon包装的使用方法，并通过代码示例来演示其具体实现。
原创
2024-05-03 07:19:55
34阅读
前言Burp Repeater作为Burp Suite中一款手工验证HTTP消息的测试工具，通常用于多次重放请求响应和手工修改请求消息的修改后对服务器端响应的消息分析。本章我们主要学习的内容有：Repeater的使用可选项设置（Options）Repeater的使用在渗透测试过程中，我们经常使用Repeater来进行请求与响应的消息验证分析，比如修改请求参数，验证输入的漏洞；修改请求参数，验证逻辑
一、如何找到页面元素Webdriver的findElement方法可以用来找到页面的某个元素，最常用的方法是用id和name查找。下面介绍几种比较常用的方法。1.1By ID假设页面写成这样：input type="text" name="passwd"id="passwd-id"那么可以这样找到页面的元素：通过id查找：WebElement element = driver.findElemen
转载
2023-11-30 21:50:26
150阅读
上一节我们介绍了Selenium工具的使用，本节我们就利用Selenium跟Chrome浏览器结合来爬取天猫羽绒服商品的信息，当然你可以用相同的方法来爬取淘宝其他商品的信息。我们要爬取羽绒服的价卖家信息，并将其打印from selenium import webdriver
#from selenium.webdriver.chrome.options import Options
#from s
转载
2024-08-19 21:20:05
104阅读
1.获取当前页面的Url 方法：current_url 实例：driver.current_url 或 print(five.current_url) --------------------------------------------------------------------------------2.获取元素坐标 方法：location 解释：首先查找到你要获取
转载
2023-09-06 12:06:51
50阅读
# 使用 Selenium 和 Java 获取网页数据的实用指南
在日常开发和数据分析过程中，我们常常需要获取网页上的信息。有时，这些信息不仅仅是简单的文本，还可能是动态渲染的内容。为了解决这个问题，Selenium 成为了一种优秀的工具。这篇文章将介绍如何使用 Selenium 和 Java 来获取网页信息，并提供一个实际的示例。
## 一、前期准备
### 1. 环境安装
首先，你需要
构成：线程组A ----- 登录请求 线程组B ----- 新建请求系统：登录生成cookie 和 token。 后面所有的请求在 cookie 的情况下，传递 token 来请求数据。  
在自动化测试实施过程中，测试程序中常用的页面元素操作步骤如下： （1）定位网页上的页面元素，并存储到一个变量中。 （2）对变量中存储的页面元素对象
转载
2024-01-03 07:40:55
175阅读
一般的的静态HTML页面可以使用requests等库直接抓取，但还有一部分比较复杂的动态页面，这些页面的DOM是动态生成的，有些还需要用户与其点击互动，这些页面只能使用真实的浏览器引擎动态解析，Selenium和Chrome Headless可以很好的达到这种目的。Headless ChromeHeadless Chrome 是 Chrome 浏览器的无界面形态，可以在不打开浏览器的前提下，使用所
转载
2023-06-19 14:25:49
355阅读
简单介绍关于数据驱动的形式有很多，我们既可以通过定义变量的方式进行参数化，也可以通过定义数组、字典方式进行参数化，还可以通过读取文件(txt\csv\xml)的方式进行参数化。下面简单介绍下如何读取txt和csv格式，xml在测试过程中好像用的少（可能是我的测试还不够丰富，等有时间也介绍下xml的读取方式）。实际操作一、读取txt格式关于txt格式文件读取，这里不再赘述，可以参考Python三种读
转载
2024-06-13 18:34:35
31阅读
在使用 Python 的 Selenium 库进行网页自动化测试、数据抓取等任务时，我们时常会需要从页面上的表格（table）中提取数据。本文将深入探讨如何使用 Selenium 获取表格标签的过程，帮助您更加高效地操作网页数据。
## 问题背景
在实际的应用场景中，我们可能会遇到需要从动态生成的 HTML 页面中提取数据的需求。常见的使用案例包括：
1. 爬取电商平台的产品信息；
2. 抽
# 使用Java Selenium获取滑动加载数据的完整指南
在当今互联网环境中，许多网站使用滑动加载（也称懒加载）技术来提高用户体验。这种技术允许网站在用户向下滚动时动态加载额外内容。在这种情况下，我们的目标是使用Java和Selenium自动化脚本来提取这些动态加载的数据。本文将提供一个详细的示例，指导您如何完成这一任务。
## 问题背景
以旅行网站为例，当用户滚动页面时，将自动加载更多
原创
2024-10-13 03:50:23
120阅读
# 使用Python Selenium获取隐藏元素的技巧
在自动化测试和网页爬虫中，Python的Selenium库是一个强大的工具。然而，很多时候我们会遇到需要获取隐藏元素的情况。隐藏元素是指那些在DOM中存在但不在可见页面上的元素，例如通过CSS设置为`display: none`或`visibility: hidden`。在这篇文章中，我们将探讨如何获取这些隐藏元素，并将通过一个实际示例来
原创
2024-09-20 11:55:41
282阅读
前言爬虫方向的小伙伴们都知道网页爬虫经常遇到的问题就是登录账户，有些简单的网站我们可以简单的send key来输入账户密码就可以登录，但是有很多网站需要验证码之类的就不太好用了，这时候就体现到了cookie登录的优点了，前段时间网上搜了搜，发现没有什么完整的教程，本文就使用selenium来cookie登录为例做一个简单的教程。 环境准备python3seleniumchromedriv
转载
2024-09-04 08:49:36
165阅读
