var fs = require('fs');var jquery = require('jquery');var url = require('url');var data
原创
2023-01-13 15:58:56
73阅读
相对于SOCKET开发者,TCP创建过程和链接折除过程是由TCP/IP协议栈自动创建的.因此开发者并不需要控制这个过程.但是对于理解TCP底层运作机制,相当有帮助. 而且对于有网络协议工程师之类笔试,几乎是必考的内容.企业对这个问题热情之高,出乎我的意料：-）。有时上午面试前强调这个问题，并重复讲一次，下午几乎每一个人都被问到这个问题。 因此在这里详细
https的免费申请流程 这篇文章包含3个主要内容：如何用nodejs创建https服务器；如何免费申请到ssl证书；nginx如何设置https服务器。如果想了解https原理部分，可以查看之前的文章介绍htts原理1、用Nodejs创建HTTPS服务器在Nodejs中，我们可以通过内置的https库，来实现HTTPS服务器。Nodejs的HTTPS使用文档：http://nodejs.org
原创
2023-05-08 13:02:05
170阅读
数据抓取
转载
2017-04-17 13:50:26
1435阅读
# Java抓取HTTPS页面教程
在这篇文章中，我将向你介绍如何使用Java来抓取HTTPS页面。无论你是新手还是有经验的开发者，我相信这篇文章能够帮你快速入门。
## 整体流程
下面是我们实现抓取HTTPS页面的整体流程：
| 步骤 | 描述 |
| --- | --- |
| 1 | 创建一个URL对象 |
| 2 | 打开一个连接 |
| 3 | 设置请求头信息 |
| 4 | 获
原创
2023-08-08 22:30:50
299阅读
# Python能抓取https
在互联网时代，我们经常需要从网站上获取数据。有时，这些数据是通过HTTP传输的，而有时则需要通过HTTPS来保证数据的安全性。Python作为一门强大的编程语言，不仅可以用于Web开发，还可以用于抓取数据。在本文中，我们将探讨如何使用Python来抓取HTTPS数据。
## 理解HTTPS
HTTPS是HTTP的安全版，使用SSL/TLS协议对数据进行加密传
原创
2023-10-13 06:54:57
81阅读
APP测试的时候，通常都需要通过抓包工具抓取各类请求，查看接口的入参、返回值等，用于分析定位问题。常用的抓包工具有fiddler、charles等，抓取http的请求比较简单，https的请求稍显复杂。由于杨叔更喜欢charles的页面风格，本篇文章主要介绍以下两点：1、Charles如何抓取电脑端和手机端的https请求；2、安卓手机无法抓取app https请求的原因和解决方案；二、Charl
## HTTPS 流量抓取方法针对 https://voo.works/api/openai/v1/chat/completions 的HTTPS流量抓取，有以下几种方法： ##
BurpSuite抓取HTTPS请求
原创
2021-07-29 13:53:25
6080阅读
首先还是推荐使用安卓6.0.直接安装证书就可以抓到https的包安装7.0或以上版本无法将证书安装到系统证书下， 设置了代理只能抓取到http的包而不是https1.雷电模拟器设置1.1 开启system.vmdk可写入 2. 其他设置 -> 开启root权限 3.网络设置 -> 桥接 便于代理抓包 3个设置都设置好后点击 保存 重启生效二：安
转载
2024-01-27 12:19:17
29阅读
通过Charles代理，我们能很轻易的抓取手机的Http请求，因为Http属于明文传输，所以我们能直接获取到我们要抓取的内容。但是Https内容本身就是加密的，这时我们会发现内容是加密的了。本文我们来讲述一下如何使用Charles抓取Https数据包及相关原理知识。一、Https客户端和服务器端通信的基本流程那么如何抓包呢，原理其实说起来也很简单，就是在客户端给服务器端发消息的时候，中间人（Cha
转载
2023-12-23 17:49:50
18阅读
HttpsClient.js 模块const https = require('https');// 不需要 body 的请求const noBody
原创
2023-03-02 16:04:38
294阅读
记一下nodejs升级https的操作
# 前置条件已有服务器已有证书
# 关键代码添加将下载好的证书放置在项目目录下 let https = require("https");let fs = require("fs");const httpsOption = { key: fs.readFileSync("./[证书目录]/xxx.key"), cert: fs.
原创
2022-11-10 13:38:32
163阅读
前置条件已有服务器已有证书关键代码添加将下载好的证书放置在项目目录下let https = require(
转载
2021-07-26 14:10:18
10000+阅读
const port = normalizePort(process.env.PORT || '3000'); const path = require('path'); const https = require('https'); const fs = require('fs'); const
原创
2022-04-19 16:58:15
221阅读
let express = require("express");let http = require("http");let https = require("https");let fs = require("fs");// Configuare httpsconst httpsOption = { key : fs.readFileSync("./https/xxxxxxxxxxx
原创
2022-06-29 20:12:40
99阅读
我们都知道charles下载安装后只能抓取http请求，要想抓取https请求需要下载安装证书 下面介绍pc端和移动端的配置方法 一.pc端(win) 1.打开charles，点击help>SSL Proxying>Install Charles root Certificate 安装证书 如下图， ...
转载
2021-08-28 11:29:00
4499阅读
2评论
火狐浏览器也安装证书了，但还是抓取不到HTTPS类型的数据包 解决办法：设置代理时在 为所有协议使用相同代理服务器(S)前打钩
原创
2022-07-04 17:18:10
197阅读
Charles1.添加需要抓取的域名Proxy?Recording Settings?Include?Add1第一步2.Mac安装根证书Help?SSL Proxying?Charles Root Certificate Help13.钥匙串中查看钥匙串?登录?所有项目?Charles Proxy CA11.34.始终信任根证书使用此证书时?始终信任
转载
2021-06-29 14:42:42
341阅读
开始之前请先确保自己安装了Node.js环境，还没有安装的的童鞋请自行百度安装教程...... 1.在项目文件夹安装两个必须的依赖包 superagent 是一个轻量的,渐进式的ajax api,可读性好,学习曲线低,内部依赖nodejs原生的请求api,适用于nodejs环境下 cheerio是n
原创
2021-07-19 15:30:04
2009阅读
