Nginx反爬我使用了python中的requests库爬取自己网址的图片 通过while True 循环爬取导致正常客户端无法访问 在nginx的access.log中看到以下记录117.170.202.207 - - [03/Feb/2021:10:35:06 +0800] "GET /pics/05.jpg HTTP/1.1" 200 326446 "-" "python-requests/
提示：文章前面部分是关于Nginx下https连接curl请求被reset的处理经历，不想看可以直接跳到最后看Nginx快速定位异常，建议收藏！问题描述网站上线后，添加了https证书，浏览器访问正常，通过curl请求，请求被reset，如上图一路艰难先curl请求同域名下http的url，返回正常，说明两边起码80端口网络正常接着curl请求网站同服务器下其他https域名，返
转载
2024-04-29 09:09:42
513阅读
当我们发送响应的时候，意味着我们即将结束当前HTTP请求，注意这里并不是关闭TCP连接，因此TCP连接可能正用在其他请求上。Nginx定义了很多接口用关闭HTTP请求，但用的最多还是ngx_http_finalize_request。接下来分析一下它。一、Nginx管理HTTP核心思想众所周知，Nginx全异步框架，当一个流程可能需要较长时间占用进程，那么Nginx建议派生出子请求(subrequ
转载
2024-03-16 09:28:36
322阅读
前置条件：nginx 需要有 ngx_http_limit_conn_module 和 ngx_http_limit_req_module 模块，可以使用命令 2>&1 nginx -V | tr ' ' '\n'|grep limit 检查有没有相应模块，如果没有请重新编译安装这两个模块。测试版本为：nginx版本为1.15+限制链接数1.使用 limit_conn_zone 指令
转载
2024-02-13 21:07:16
49阅读
1. Nginx 是如何实现高并发的?异步，非阻塞，使用了epoll 和大量的底层代码优化。 如果一个server采用一个进程负责一个request的方式，那么进程数就是并发数。正常情况下，会有很多进程一直在等待中。 而nginx采用一个master进程，多个woker进程的模式。master进程主要负责收集、分发请求。每当一个请求过来时，master就拉起一个worker进程负责处
转载
2024-05-29 06:50:51
173阅读
1. 概述可以通过 用户名加密码 授权机制，限制对整个网站或网站的某些部分的访问。用户名和密码从一个文件获取，这个文件可以通过密码文件创建工具创建和填充，例如 apache2-utils。 HTTP 基本认证可以和其他的访问限制方法结合使用，例如通过 IP 地址或地理位置限制访问。2. 先决条件 PrerequisitesNGINX Plus or NGINX Open Source密码文件创建
转载
2024-04-23 11:40:48
41阅读
之前也有段时间接触过Nginx，主要是自己拿来学习研究用，记得当时还写过两篇入门级的文章如何在windows上配置并运行nginx -- 安装篇和如何在windows上配置并运行nginx -- 配置实例篇， 呵呵，比较入门，别见怪了。今天在详细看Nginx配置的时候，突然想到一个问题：如何在Nginx配置中限定只能用域名访问服务器，而不能IP访问呢？ 原先我还以为这在Nginx下是不可能的，也就
转载
2024-03-12 16:57:03
219阅读
Nginx使用HTTP基本身份验证限制访问 介绍先决条件创建密码文件配置NGINX和NGINX Plus以进行HTTP基本身份验证将基本身份验证与IP地址的访问限制相结合完整的例子 介绍您可以通过实现用户名/密码身份验证来限制对网站或网站某些部分的访问。用户名和密码取自由密码文件创建工具创建并填充的文件，例如apache2-utils。HTTP基本身份验证也可以与其他访问限制方法结合使用
转载
2024-03-27 09:43:54
197阅读
访问权限控制：想更精准控制访问权限，其实还有auth_basic指令，用户必须输入有效的用户名和密码才能访问站点。而用户名和密码应该列在 auth_basic_user_file指令设置的文件中。server {
...
auth_basic "closed website";
auth_basic_user_file conf/htpasswd;
}
转载
2024-05-25 20:27:39
54阅读
最近需要把阿里云上的四台服务器的项目迁移到客户提供的新的项目中，原来的四台服务器中用到了一级域名和二级域名。比如aaa.abc.com 和bbb.abc.com 和ccc.abc.com。其中aaa.abc.com登录，通过把cookie中的信息setDomain给.abc.com。其他系统可以共享这个cookie。但是新的四台服务器中并没有申请域名，只有四个ip:192.168.0.1 
模块的上下文是四个结构体定义的：ngx_core_module_t、ngx_event_module_t、ngx_http_module_t、ngx_mail_module_t，分别对应于四类模块。typedef struct {
ngx_str_t name;
void *(*create_conf)(ngx_cycle_t
SSL虚拟主机配置基于加密网站的虚拟主机，实现： 域名为www.c.com 该站点通过https访问 通过私钥、证书对该站点所有数据加密方案源码安装Nginx时必须使用--with-http_ssl_module参数，启用加密模块，对于需要进行SSL加密处理的站点添加ssl相关指令（设置网站需要的私钥和证书）。 加密算法一般分为对称算法、非对称算法、信息摘要。 对称算法有：AES、DES，主要应用
转载
2024-02-27 22:16:16
793阅读
目录一、Nginx优化1.1配置Nginx隐藏版本号1.1.1修改配置文件法1.1.2修改源码法（修改源码法要在编译之前）1.2修改Nginx用户与组1.3配置Nginx网页缓存时间1.4实现Nginx的日志切割1.5实现连接超时1.6更改Nginx运行进程数1.7Nginx网页压缩1.8FPM 参数优化二、Nginx防盗链配置 一、Nginx优化1.1配置Nginx隐藏版本号隐藏Nginx版本
转载
2024-05-21 21:33:54
47阅读
上一节我们讲了一些nginx编译的部分参数，这里我们继续进行相关参数的讲解。就不在举例实际的内容，我们按照所存在的编译参数进行讲解。1 .禁用相关服务--without-http-cache 禁用 http cache 功能--without-http 禁用 http server 功能（这关了还要它干啥？？）--without-pcre 禁用 pcre 库--without-mail_imap_
转载
2024-03-14 09:03:21
93阅读
linux版本：64位CentOS 6.4Nginx版本：nginx1.8.0php版本：php5.5.28 1.编译安装Nginx官网：http://wiki.nginx.org/Install下载：http://nginx.org/en/download.html 1、首先确保系统安装GCC编译器及相关工具(autoconf 和automake他们用于自动创建功能完善的ma
转载
2024-08-06 14:48:20
184阅读
1. 在Nginx中禁用server_tokens指令该server_tokens指令告诉nginx的错误页面显示其当前版本。 这是不可取的，因为您不想与世界共享这些信息，以防止在您的Web服务器由特定版本中的已知漏洞造成的攻击。 要禁用server_tokens指令，设定在关闭服务器块内：server {
listen 192.168.0.88:80;
Server_tokens
转载
2024-02-26 16:54:17
51阅读
最近越来越频繁地遇到需要配置反向代理的场景，在自己搭建博客的时候，也不可避免要用到 Nginx，所以这段时间集中学习了一下 Nginx，同时做了一些笔记，希望也可以帮助到大家～ ?这篇文章会在 CentOS 环境下安装和使用 Nginx，如果对 CentOS 基本操作还不太清楚的，可以先看看 <半小时搞会 CentOS 入门必备基础知识> 一文先做了解。相信作为开发者，大家都知道 Ng
转载
2024-08-27 13:19:06
173阅读
这篇文章主要介绍了Nginx中禁止使用IP访问网站的配置实例,一般在备案时可能需要这种设置,需要的朋友可以参考下
国内因为备案的原因，所有服务器都要禁止使用IP访问网站。否则，如果允许使用IP访问网站，那随便解析一个域名到该IP，访问该域名就可以打开网站了。这是一个极大的风险！Nginx中可以很方便的来解决这个问题，小菜鸟来跟大家一起探讨一下。如下的配
转载
2024-04-11 14:14:43
113阅读
漏洞介绍一、 最近在工作中，公司产品负责人反馈了项目地区一台服务器里tomcat被客户检测到有漏洞，这是绿盟给到的漏洞报告反馈如下图：1、第一个漏洞是CVE-2021-42340,这个不多介绍，当时服务器Apache Tomcat版本为8.5.69,在受影响的版本范围内，升级到8.5.72版本以上即可修复。2、主要看这个CVE-2016-2183漏洞那么简单介绍下CVE-2016-2183漏洞。漏
转载
2024-07-08 22:34:11
550阅读
网页的全面加密是一个很明显的未来趋向，安全性这一因素被越来越多的网站考虑，部署 https 加密对于大多数网站来说都非常必要，尤其是当搜索巨头Google 宣布会稍微提高 https 网站的优先级之后。这家公司本身就非常注重安全性和保密性，因此推出这样的策略也不难理解，也能极大地推动加密称为网站建设的标准配置。指引 / 跳至1 为什么要加密2 禁用 SSLv3 协议3 
转载
2024-06-05 14:02:18
361阅读
