51工具盒子

依楼听风雨
笑看云卷云舒,淡观潮起潮落

BT宝塔面板Nginx防火墙针对蜘蛛放行设置教程

很多小伙伴在安装BT宝塔面板的时候,都会安装Nginx防火墙模块,毕竟多一重保险。但是有的小伙伴毕竟第一次接触Nginx防火墙,会发现很多被拦在防火墙外面,比如一些搜索引擎蜘蛛,这个怎么回事呢,今天,搬主题就分享一下BT宝塔面板Nginx防火墙针对蜘蛛放行设置教程。

什么?还没安装免费的BT宝塔面板?点击进行下载安装

宝塔服务器面板,一键全能部署及管理,送你3188元礼包,点我领取

一般BT宝塔面板的默认防火墙是放行如下7种蜘蛛:百度蜘蛛、谷歌蜘蛛、360蜘蛛、必应蜘蛛、搜狗蜘蛛、雅虎蜘蛛、头条蜘蛛

蜘蛛IP库是会自动更新的。不需要你自行设置放行的蜘蛛UA头。所有的蜘蛛IP都是通过官方途径获取。准确率能达到99%。也存在某些IP不在蜘蛛池内的,但是会很少。这个会实时更新的。蜘蛛的优先级高于CC 。所以蜘蛛爬取的话。是不会受你设置的CC规则而导致的拦截的。

如果蜘蛛被拦截了可能的原因: 设置了UA黑名单、设置了IP黑名单、设置了不让蜘蛛爬取。

自定义蜘蛛爬取规则

拒绝蜘蛛爬取

限制某一种蜘蛛的爬取

蜘蛛拦截的记录会记录到日志种如下:

这里是根据UA来匹配的。不是根据IP地址池来匹配的。

演示:拦截百度蜘蛛

拦截谷歌蜘蛛

拦截所有蜘蛛

备注:Nginx防火墙需要升级到9.4.2 才能生效蜘蛛拦截的规则。之前的版本只对总开关做了拦截。但是没有对单个的蜘蛛进行拦截

什么?还没安装免费的BT宝塔面板?点击进行下载安装

宝塔服务器面板,一键全能部署及管理,送你3188元礼包,点我领取
© 版权声明
版权声明

① 本站文章均为原创,除非另有说明,否则本站内容依据CC BY-NC-SA 4.0许可证进行授权,转载请附上出处链接,谢谢。
② 本站提供的资源(插件或主题)均为网上搜集,如有涉及或侵害到您的版权请立即通知我们。
③ 本站所有下载文件,仅用作学习研究使用,请下载后24小时内删除,支持正版,勿用作商业用途。
④ 因代码可变性,不保证兼容所有浏览器、不保证兼容所有版本的WP、不保证兼容您安装的其他插件。
⑤ 本站保证所提供资源(插件或主题)的完整性,但不含授权许可、帮助文档、XML文件、PSD、后续升级等。
⑥ 使用该资源(插件或主题)需要用户有一定代码基础知识!另本站提供**汉化使用安装教程** ,仅供参考。由本站提供的资源对您的网站或计算机造成严重后果的本站概不负责。
⑦ 有时可能会遇到部分字段无法汉化,同时请保留作者汉化宣传信息,谢谢!
⑧ 本站资源售价只是赞助和汉化辛苦费,收取费用仅维持本站的日常运营所需。
⑨ 如果喜欢本站资源,欢迎捐助本站开通会员享受优惠折扣,谢谢支持!
⑩ 如果网盘地址失效,请在相应资源页面下留言,我们会尽快修复下载地址。
THE END

赞(1)
未经允许不得转载:工具盒子 » BT宝塔面板Nginx防火墙针对蜘蛛放行设置教程