Nginx是一个高性能的HTTP和反向代理服务，目前很大一部分网站均使用了Nginx作为WEB服务器，Nginx虽然非常强大，但默认情况下并不能阻挡恶意访问。在开始之前，希望您已经熟悉Nginx常用命令（如停止、重启等操作）及排查Nginx错误日志，以免出现问题不知所
转载
2023-01-25 20:01:41
523阅读
不谈具体的代码，php站点安全防护心得首先，php本身有漏洞不在这篇文章的讨论范围之内，具体问题自行解决，这里要说的，是假如代码就是有漏洞，但是漏洞又找不到的情况下，如何去做。此文章仅针对小站点，大站点请忽略。常见的漏洞有三个，通过XSS进入了后台，上传木马，sql注入。sql注入百度搜下很多，我的办法比较笨，过滤的严格一点，特殊地方不能过滤的，再特殊对待实验环境centos7 php7.1 ng
转载
2024-08-15 13:56:05
225阅读
有些时候我们会遇到这样的困难：我们原本不想被搜索引擎收录的网站后台地址却被搜索引擎“无情”的收录，这样只要在Google里输入一个“后台、管理site:www.soumore.com”，自己的后台地址就会显露无疑，因此网站安全性也无从谈起。遇到这样的情况时，我们如何阻止搜索引擎收录我们不想被收录的文件呢？怎样屏蔽蜘蛛的抓取，我们常用的办法有两个，一个是编辑robots.txt文件，另外一个是在不想
如果有一天，你突然发现自己的网站打开的时候，提示说数据库连接不上了，但是访问统计显示访客并没有明显的增长，近期也没有新增什么占用cpu比较大的插件，主机商的服务器也没有什么问题，自己的数据库信息也正确，那么很有可能是一些搜索引擎的蜘蛛访问和抓取过于频繁导致网站的cpu超标，并发数也达到了最大，因此主机商采用了零时限制的方法，通常会偶尔断开一下，如果遇到搜狗这样的蜘蛛频繁的光顾，那么很可能网站就基本
大多数情况下，我们都会使用robots.txt文件对搜索引擎蜘蛛的抓取行为进行限制，这是一种非常规范的做法。除此之外，我们还可以通过网页头部的META标签禁止搜索引擎抓取，这种方法的优点是只针对当前网页，操作起来比较灵活。只是针对百度搜索，不知道管用不，记录下来，试试 具体的代码非常简单，只需要在你的网页和之间插入一句： <meta name="robots"
一、无线路由器的初始设置。
1、打开IE浏览器，在地址栏中输入“192.168.1.1”。按回车。
再在弹出的对话框中输入：用户名和密码。（新买来的路由器的默认用户名和密码都是admin）
2、进去管理页面，我们可以看到无线路由器的界面了。继续，我们选择“设置向导”。（建议新手都选择“设置向导”）
点击“下一步”。
3、由于我们大多数人都基本上是用的ADSL上网的。所以，我们就选择“AD
转载
2024-05-03 14:06:54
137阅读
正规的搜索引擎的蜘蛛爬行我们的网站对于网站来说是有利的，但垃圾爬虫我们就需要屏蔽掉它们的访问，因为它们有的是人为来采集我们网站内容的，有的是SEO以及其他工具索引我们的网站数据建库进行分析的。它们不仅对网站内容不利，而且对于网站服务器也是一种负担。即便bot支持,但实际情况是robots.txt 根本无法阻止那些垃圾蜘蛛的，好在垃圾爬虫基本上还是有一定特征的，比如可以根据UA分析。即可使用少量代码
原创
2021-01-30 21:47:36
1660阅读
方法一： 文本 robots.txt文件应该同时包含2个域，User-agent: 和 Disallow: ，每条指令独立一行。 （1）User-agent:指定允许哪些蜘蛛抓取，如果给出参数，则只有指定的蜘蛛能够抓取；如值为通配符“*”，代表允许所有蜘蛛抓取。如： User-agent:Googlebot &
转载
2024-05-06 16:44:48
657阅读
这样就能够阻止SemrushBot蜘蛛爬虫访问网站内容。需要注意的是，这仅仅是一种基本的方法，某些高级爬虫可能
这样就能够阻止SemrushBot蜘蛛爬虫访问网站内容。需要注意的是，这仅仅是一种基本的方法，某些高级爬虫可能
主要是判断HTTP_USER_AGENT//屏蔽蜘蛛访问function banspider($ban_str){ if(preg_match("/($ban_str)/i", $_SERVER['HTTP_USER_AGENT'])) { exit; }} 常用搜索引擎名与 HTTP_USER_AGENT对应值百度 ba...
转载
2022-08-05 16:58:30
61阅读
好像现在屏蔽baiduspider已经成为一种时尚，难道这玩意也跟着纳斯达克变? 首先我自己不会屏蔽baiduspider，也不大相信baiduspider会故意忽略robots.txt，但如果你真的想屏蔽 baiduspider，可尝试以下方法： 1. 上传一个robots.txt到根目录，内容为： User-agent: baiduspider Disallow: / 一个搜索引
一般的蜘蛛都会在后台控制面板中显示名字，例如baidu，google，yahoo，alexa等等，但是如果你用的虚拟
原创
2023-01-25 20:01:03
519阅读
对于做国内站的我来说，我不希望国外蜘蛛来访问我的网站，特别是个别垃圾蜘蛛，它们访问特别频繁。这些垃圾流量多了之后，严重浪费服务器的带宽和资源。通过判断user agent，在nginx中禁用这些蜘蛛可以节省一些流量，也可以防止一些恶意的访问。步骤1、进入nginx的配置目录，例如cd /usr/local/nginx/conf2、添加agent_deny.conf配置文件#禁止Scrapy等工具的
转载
精选
2015-03-12 11:22:00
1383阅读
Nginx优化方法 ●隐藏软件版本号 ●设置连接超时 ●更改程序运行用户与组 ●更改进程数 ●配置网页缓存时间 ●配置网页压缩与防盗链 ●Nginx日志切割 ●fpm参数优化nginx隐藏版本号 (在生产环境中，需要内藏版本号，以免nginx的版本，使得者不能对挺特定版本)查看nginx版本，可以使用命令curl -I 查看
[root@localhost ~]# curl -I ht
转载
2024-07-04 19:59:19
61阅读
nginx中可通过写入配置文件的方法来达到一定的过滤IP作用，可使用deny来写。deny的使用方法可用于前端服务器无防护设备的时候过滤一些异常IP，过滤的client ip会被禁止再次访问，起到一定的阻断作用。但是，在现在这个网络环境非常负载的情况，实际阻断的IP可能都是一些代理模拟出来的，所以遇到大范围异常攻击的时候还是选用前端的防护设备如FW、DDOS等才可进行防护。1、首先遍历nginx_
转载
2024-05-25 21:27:59
34阅读
if ($http_user_agent ~* (baiduspider|googlebot|soso|bing|sogou|yahoo|sohu-search|yodao|YoudaoBot|robozilla|msnbot|MJ12bot|NHN|Twiceler)) { return 403; &
原创
2011-07-18 15:22:08
1027阅读
用户数量庞大的应用，尤其是互联网应用，面对庞大的用户群体，在高并发场景下，因为请求过多，压力转移到服务器，容易导致服务宕机等故障，因此需要使用限流对服务进行保护。瞬时大量用户访问服务器，导致服务器超载而宕机。恶意请求攻击服务器，导致服务器超载而宕机。对于特定应用，例如爬虫等，针对性的进行分析、限流。1 限制单IP并发访问数量ngx_http_limit_conn_module模块用于限制连接数量，
介绍我们使用Nginx进行代理时，所有的网络请求都是通过Nginx进行分发。而只要是软件那么都会有漏洞。Nginx也再所难免会有一些漏洞，而Nginx也在不断进行版本迭代，那么我们就需要在对外访问的时候，避免外界获取到我们的Nginx的版本。减少部分因为版本暴露而出现的攻击风险。（及时升级最新版本，安全性会更高。）本篇介绍如何将我们的Nginx的版本号进行隐藏，避免受到外界攻击。1、如何查询自己的
转载
2024-02-12 21:03:56
121阅读
防御DDOS是一个系统工程，攻击花样多，防御的成本高瓶颈多，防御起来即被动又无奈。DDOS的特点是分布式，针对带宽和服务攻击，也就 是四层流量攻击和七层应用攻击，相应的防御瓶颈四层在带宽，七层的多在架构的吞吐量。对于七层的应用攻击，我们还是可以做一些配置来防御的，例如前端是 Nginx，主要使用nginx的http_limit_conn和http_limit_req模块来防御。 ngx_http_
