关键词：异常流量、rate limiting、Nginx、Apriori、频繁项集、先验算法、Lua、ELK
提纲：
所谓异常流量 如何识别异常流量 Apriori如何工作 如何让 Nginx 拦截可疑 IP
0x00，所谓异常流量
有害的异常流量大概分为以下几种：
转载
2024-08-27 13:51:26
14阅读
在开始之前，请先备份你的 Nginx 配置。1.防止文件被下载比如将网站数据库导出到站点根目录进行备份，很有可能也会被别人下载，从而导致数据丢失的风险。以下规则可以防止一些常规的文件被下载，可根据实际情况增减。location ~ .(zip|rar|sql|bak|gz|7z)$ { return 444; }2.屏蔽非常见蜘蛛（爬虫） ####如果经常分析网站日志你会发现，一
1.Nginx概述1.1Nginx 简介nginx是一款高性能的http 服务器/反向服务器及电子邮件（IMAP/POP3）服务器。由俄罗斯的程序设计师Igor Sysoev所开发，官方测试nginx能够支支撑5万并发，并且cpu、内存等资源消耗却非常低，运行非常稳定，所以现在很多知名的公司都在使用nginx。2004 年 10 月发布第一个版本。国内大型的站点，例如百度、京东、新浪、
转载
2024-08-16 19:23:25
662阅读
在这些异常流量对我们的系统或用户产生大量危害之前，系统就应该拦截。
于是，第一个问题是，如何识别异常流量。
郑昀 基于杨海波的设计文档 创建于2015/8/13 最后更新于2015/8/25
关键词：异常流量、rate limiting、Nginx、Apriori、频繁项集、先验算法、Lua、ELK本文档适用人员：技术人员提纲：所谓异常流量如何识别异常流
转载
2024-06-24 18:08:23
52阅读
if ($http_user_agent ~* (SemrushBot|python|MJ12bot|AhrefsBot|AhrefsBot|hubspot|opensiteexplorer|leiki|webmeup)) { return 444; }3.禁止某个目录执行脚本 ####比如网站上传目录，通常存放的都是静态文件，如果因程序验证不严谨被上传木马程序，导致网站被黑。以下规
转载
2024-07-29 22:09:41
120阅读
在开始之前，请先备份你的 Nginx 配置。1.防止文件被下载比如将网站数据库导出到站点根目录进行备份，很有可能也会被别人下载，从而导致数据丢失的风险。以下规则可以防止一些常规的文件被下载，可根据实际情况增减。location ~ .(zip|rar|sql|bak|gz|7z)$ { return 444; }2.屏蔽非常见蜘蛛（爬虫） ####如果经常分析网站日志你会发现，一
转载
2024-07-25 13:33:23
83阅读
nginx 拦截非法字符，nginx禁止url访问特定字符，nginx过滤url访问参考代码一#前缀为无限，后面的精准屏蔽字符 123
#资源宝分享：www.httple.net
if ($request_uri ~* "123") {
return 403 "I've recorded your ip Wait to check the water meter";
}参考代码二#前缀为in
转载
2024-03-07 21:57:10
1597阅读
一、静态代理 Nginx静态代理是指将所有的静态资源，例如，css、js、html、jpg等资源存放到Nginx服务器，而不存放在应用服务器Tomcat中，当客户端发出的请求是对这些静态资源的请求时，Nginx直接将这些静态资源响应给客户端，而无需提交给应用服务器处理，这样就减轻了应用服务器的压力。（一）扩展名拦截 1、修改配置文件location ~ .*\.(css|js|html|png
转载
2024-02-03 17:50:33
2416阅读
前段时间在自己做开发的时候发现一个很好用的工具，OKHttp的拦截器（何为拦截器？就是在每次发送网络请求的时候都会走的一个回调）大概效果如下： 现在OkHttp也是谷歌推荐的一款网络请求框架。现在很火的Retrofit2也都是基于OkHttp的封装。 如果每次看Log服务器返回的数据等都需要用PostMan发请求显得有点 low，可以直接集成拦截器在发送请求的时候打印出来就如同上图，
转载
2024-07-22 10:40:16
207阅读
前提遇到的问题分析解决Nginx设置日志 前提我用nginx代理了两个端口，如下图所示：项目使用了一个拦截器，除了首页和静态资源都会被拦截遇到的问题如下图所示：我登录进入了首页，然后点击显示页面，但是被拦截了，显示页面就是一个list请求，按理说在Session存在的情况下不可能被拦截呀。分析解决我想是不是Session失效了或者访问的不是同一个端口，因为上面设置了nginx代理是轮询权重都是1
转载
2024-02-23 18:40:11
294阅读
显示乱码问题server { listen 80; server_name example.; root /var//example; location / { charset utf-8; #一般是在个别的location中加入此项，具体情况具体对待 rewrite .* /index.html break; }}index显示列表(一般为企业内部使用)可在在locatio
转载
2024-03-15 16:09:10
320阅读
文章目录引入简介作用常用命令配置文件 引入在公司项目刚上线时，用户少，并发量小，此时一个jar包启动应用就够了，然后内部 Tomcat 返回内容给用户 当用户增多，并发量增大，一台服务器满足不了我们的需求 于是可以横向扩展，增加服务器；这时几个项目启动在不同的服务器上，用户要访问，就需要增加一个代理服务器了，通过代理服务器来帮我们转发和处理请求 我们希望这个代理服务器可以帮助我们接收用户的请求，
转载
2024-07-05 23:33:03
329阅读
Nginx安装lua支持 需要LuaJIT-2.0.4.tar.gz，ngx_devel_kit，lua-nginx-module1.下载安装LuaJIT-2.0.4.tar.gz wget -c http://luajit.org/download/LuaJIT-2.0.4.tar.gz
tar xzvf LuaJIT-2.0.4.tar.gz
cd LuaJIT-2.0.4
make ins
1. 企业常用的Nginx重要功能模块1.1 Nginx核心功能模块（Core functionality）Nginx核心功能模块负责Nginx的全局应用，主要对应主配置文件的Main区块和Events区块区域，这里有很多Nginx必须的全局参数配置。
详情见：nginx.org/en/docs/ngx_core_module.html1.2 标准的HTTP功能模块集合上述这些模块，大部分在默认情
Nginx+Lua+Redis安装在公网IP为x.x.x.x的服务器上下载安装的软件版本：nginx-1.18.0+LuaJIT-2.0.5+redis-6.0.5Nginx+Lua+Redis安装第一步，安装编译工具及库文件。命令：yum groupinstall -y "Development Tools"yum install -y libxml2-devel curl-devel sieg
转载
2024-05-29 11:17:46
101阅读
Nginx的产生没有听过Nginx？那么一定听过它的"同行"Apache吧！Nginx同Apache一样都是一种WEB服务器。基于REST架构风格，以统一资源描述符(Uniform Resources Identifier)URI或者统一资源定位符(Uniform Resources Locator)URL作为沟通依据，通过HTTP协议提供各种网络服务。然而，这些服务器在设计之初受到当
学习《NGINX 经典教程》林静，刘旭峰，章澍，廖健雄，宗兆伟 ... 著目录一、Nginx优点二、功能(应用场景)反向代理。负载均衡静态缓存Web服务器安全和访问控制三、nginx安装四、启动、停止和重载nginx五、配置文件六、配置静态文件web服务器一、Nginx优点高并发。能够处理高并发请求是nginx最显著的特点。高稳定性。高扩展性。Nginx以模块未单位组织相应的配置解析和
Nginx提供的全局变量或自己设置的变量，结合正则表达式和标志位实现url重写以及重定向。rewrite只能放在server{},location{},if{}中，并且只能对域名后边的除去传递的参数外的字符串起作用。Rewrite主要的功能就是实现URL的重写，Nginx的Rewrite规则采用Pcre，perl兼容正则表达式的语法规则匹配，如果需要Nginx的Rewrite功能，在编译Nginx
转载
2024-03-18 06:30:42
108阅读
1.什么是Nginx百度百科中Nginx的介绍为 用一句话总结：Nginx 是⼀个⾼性能的HTTP和反向代理web服务器，核⼼特点是占有内存少，并发能⼒强。Nginx的应用场景可以分为：Http服务器（WEB服务器）、反向代理、负载均衡服务器、动静分离。Nginx的特点：跨平台：Nginx可以在⼤多数类unix操作系统上编译运⾏，⽽且也有windows版本Nginx的上⼿⾮常容易，配置也
转载
2024-02-22 21:36:04
48阅读
nginx相对来说已经是主流web服务器/反向代理服务器，内存占用小，并发能力超强的优势，是我们选择他的关键。 在我们刚涉及nginx时候，学习配置文件，会有一个疑问：location是不是按照先后顺序来决定优先级的。这个问题解决清楚，对我们以后深入学习有不少帮助，接下来我们分析一下location的优先级问题。 首先，答案就是：在nginx的location和配置中location的
转载
2024-03-19 10:19:07
79阅读
