背景：使用HttpsURLconnection或者HttpURLConnection进行https请求时，有时会报Connection reset异常 原因：这是因为客户端的TLS版本服务端不支持的原因。对于JDK1.6，支持SSLv2、SSLv3、TLSv1，默认使用TLSv1对于JDK1.7，支持SSLv2、SSLv3、TLSv1、TLSv1.1、TLSv1.2，默认使用TLSv1.1对于JD
原创
2023-06-17 16:28:42
277阅读
https网站服务器都是有证书的。 是由网站自己的服务器签发的，并不被浏览器或操作系统广泛接受。 在使用CloseableHttpClient时经常遇到证书错误(知乎的网站就是这样) 现在需要SSL绕过证书，下面直接贴出代码，调用时只需要在发送请求后 new HttpsBerBer(文件的字节码)
原创
2021-06-04 20:09:25
1228阅读
# Python HTTPS 爬虫入门指南
在互联网时代，数据是无处不在的，掌握爬虫技能可以帮助我们获取需要的信息。本文将指导你如何用Python实现一个简单的HTTPS爬虫，下面是整个过程的概览：
## 流程概览
以下表格展示了实现Python HTTPS爬虫的主要步骤：
| 步骤 | 说明 |
|-----
原创
2024-08-18 04:39:01
39阅读
要网站的，私信我（不玩套路那种） 分析 首先打开这个网站，看到由cloudflare，心里戈登一下，不慌，接着看 找到接口，查看返回数据 拿到数据接口单独请求会出现如下： 发现果然有cloundflare检测 用火狐浏览器打开 然后用重放请求功能看看，正常请求 而且能正常拿数据 那我用postman测试
题外话说明一下为什么叫修复版，我之前发了这篇文章，
2、http协议 什么是http协议？双方规定的传输形式 http协议：网站原理 应用层的协议 ftp（21）
转载
2023-08-30 15:16:33
2阅读
一：抓取简单的页面：用Python来做爬虫抓取网站这个功能很强大，今天试着抓取了一下百度的首页，很成功，来看一下步骤吧首先需要准备工具：1.python:自己比较喜欢用新的东西，所以用的是Python3.6,python下载地址：https://www.python.org/2.开发工具：用Python的编译器即可（小巧），不过自己由于之前一直做得前端，使用的webstrom，所以选择JetBra
转载
2023-05-28 18:14:16
271阅读
HTTP和HTTPSHTTP协议（HyperText Transfer Protocol，超文本传输协议）：是一种发布和接收 HTML页面的方法。HTTPS（Hypertext Transfer Protocol over Secure Socket Layer）简单讲是HTTP的安全版，在HTTP下加入SSL层。SSL（Secure Sockets Layer 安全套接层）主要用于Web的安全传
转载
2023-07-05 22:18:40
123阅读
1 dns 可以把网址解析成ip地址；2 robots.txt 爬虫权限：规定爬虫可以爬取的内容，但是并不是懂遵守的，大型搜索引擎公司都是遵守的3 HTTP和HTTPSHTTP协议(HyperText Transfer Protocol，超文本传输协议)：是一种发布和接收 HTML页面的方法。HTTPS(Hyper
转载
2023-12-12 10:35:57
62阅读
# Python爬虫：使用requests库进行HTTP请求
**作者：OpenAI助手**
## 引言
在现代互联网时代，数据是非常宝贵的资源。为了获取宝贵的数据，我们可以使用爬虫技术从网页中提取信息。Python作为一种简单易用且功能强大的编程语言，拥有许多用于爬虫的库。其中，requests库是最受欢迎和广泛使用的库之一。本文将介绍如何使用requests库进行HTTPS请求，并提供一
原创
2023-09-18 18:01:26
126阅读
自上篇爬虫文章写完之后，好长时间都没有再写爬虫相关的了，这次重新回顾了一下爬虫的相关内容，一并记在这里。有的东西之前虽然已经写过了，但是再废话一遍。http/https 协议HTTP(Hypertext Transfer Protocol，超文本传输协议)：是一种发布和接受 HTML 网页的方法，服务器端口号为 80 端口HTTPS(Hypertext Transfer Protocol over
转载
2023-09-21 08:03:50
103阅读
2、http协议
什么是http协议？双方规定的传输形式
http协议：网站原理 应用层的协议 ftp（21）
转载
2023-12-01 20:56:24
8阅读
python爬虫学习笔记1-HTTP和HTTPS协议HTTP协议协议HTTP协议(HyperText Transfer Protocol,超文本传输协议)HTTPS（Hypertext Transfer Protocol over Secure Socket Layer）SSL（Secure Sockets Layer 安全套接层）Http请求与响应Http请求与响应应用场景应用场景解析请求方法
转载
2023-09-11 13:28:03
50阅读
一.HTTP协议1.官方概念：HTTP协议是Hyper Text Transfer Protocol（超文本传输协议）的缩写,是用于从万维网（WWW:World Wide Web ）服务器传输超文本到本地浏览器的传送协议。（虽然童鞋们将这条概念都看烂了，但是也没办法，毕竟这就是HTTP的权威官方的概念解释，要想彻底理解，请客观目移下侧......）2.白话概念：HTTP协议就是服务器（Server
转载
2023-07-17 20:36:14
8阅读
服务器使用nginx， SSL证书暂时使用的阿里云一年免费版。使用HTTPS无法访问，提示 ERR_CONNECTION_RESET 连接已重置情况如下：一、通过HTTP+域名方式访问正常即访问http+yy.youyou.work能访问，说明域名已解析成功二、通过HTTPS+IP方式访问正常即访问https+IP能访问，说明防火墙对443端口已经放开三、通过HTTPS+域名方式访问异常即访问h
原创
2021-08-13 09:28:20
3874阅读
1.HTTP和HTTPSHTTP协议（HyperText Transfer Protocol，超文本传输协议）：是一种发布和接收 HTML页面的方法。HTTPS（Hypertext Transfer Protocol over Secure Socket Layer）简单讲是HTTP的安全版，在HTTP下加入SSL层。SSL（Secure Sockets Layer 安全套接层） 主要用于W
原创
2022-03-23 16:38:59
634阅读
1.HTTP和HTTPSHTTP协议（HyperText Transfer Protocol，超文本传输协议）：是一种发布和接收 HTML页面的方法。HTTPS（Hypertext Transfer Protocol over Secure Socket Layer）简单讲是HTTP的安全版，在HTTP下加入SSL层。SSL（Secure Sockets Layer 安全套接层） 主要用于W...
原创
2021-07-07 09:34:07
643阅读
1 dns 可以把网址解析成ip地址；
2 robots.txt 爬虫权限：规定爬虫可以爬取的内容，但是并不是懂遵守的，大型搜索引擎公司都是遵守的3 HTTP和HTTPSHTTP协议（HyperText Transfer Protocol，超文本传输协议）：是一种发布和接
转载
2023-12-27 16:21:02
21阅读
在Kubernetes（K8S）环境中，我们经常会遇到需要在Java应用程序中进行网络连接的情况。然而，有时候会遇到连接被重置（reset）的问题。在这篇文章中，我将向你介绍如何在Java中处理和解决这个问题。
**流程概述：**
下面是在Java中处理“java connect reset”问题的流程步骤：
| 步骤 | 描述 |
| --- | --- |
| 1 | 创建一个HttpU
原创
2024-05-28 09:54:13
420阅读
一.Anaxonda的安装 1.双击Anaconda3-5.0.0-Windows-x86_64.exe文件 2.下一步 3. ① 打开cmd窗口，录入jupyter notebook指令， 如果没有显示找不到命令且没有报错即可表示安装成功！ ②在开始菜单中显示 二.HTTP 与HTTPS 1.HT
原创
2019-05-27 20:25:00
244阅读
# Java Connection Reset in K8S Environment
As an experienced developer, I understand the challenges that come with dealing with Java connection resets in a Kubernetes (K8S) environment. In this artic
原创
2024-05-28 09:53:52
119阅读
