[硬核]Nginx屏蔽垃圾蜘蛛的办法
发布于 2025-02-09 21:21:29
0
53
网站被疯狂抓取，甚至服务器都快宕机了。下面，是Nginx屏蔽垃圾蜘蛛的方法。都使用宝塔面板的吧，那就好办多了。打开 宝塔后台网站网站管理配置文件 中搜索禁止访问的文件或目录在它上面敲个回车，然后加入下...
网站被疯狂抓取，甚至服务器都快宕机了。下面，是Nginx屏蔽垃圾蜘蛛的方法。
都使用宝塔面板的吧，那就好办多了。打开 宝塔后台-网站-网站管理-配置文件 中搜索
#禁止访问的文件或目录在它上面敲个回车，然后加入下面代码
if ($http_user_agent ~* "AhrefsBot|bingbot|Bytespider|Baiduspider|SemrushBot|YisouSpider|facebook|applebot|sogou|mj12bot"){
return 403;
}完成，超级简单。使用 | 隔开，可以禁止任何搜索引擎蜘蛛哦。
评论
登录 | 注册
一个月内的热帖推荐
- 香港、美国站群服务器、云服务器、大带宽、自营机房，线路稳定。
- w3c标准是什么
- VS Code快捷键大全
- pin码是什么意思
- 为什么音量设置最大是100，却还有许多音量增强300%的插件？
- PHP的命令行扩展Readline相关函数学习
- Trae 支持哪些编程语言？
- 通义灵码
- 发现有一句至理名言不错
- PHP的Mcrypt加密扩展知识了解
- PHP的另一个高效缓存扩展：Yac
- 人工智能安全（AI Security）
- 在PHP中操作临时文件
- 生成模型（Generative Models）
- 强化学习中的探索与利用（Exploration vs. Exploitation）
- PHP的加密伪随机数生成器的使用
- 学习PHP弱引用的知识
- 判别模型（Discriminative Models）
- Agent智能体如何学习新技能？
- use关键字在PHP中的几种用法
- 逻辑回归（Logistic Regression）
- 接入deepseek的平台有哪些
- 付高额彩礼还是提出分手，唉
- seyouCMS程序需租用站群服务器的优势
- PHP中操作数据库的预处理语句
- LINUX下用PHP获取CPU型号、内存占用、硬盘占用等信息代码
- 通义千问-Max (qwen-MAX）
- 站群服务器怎么做跨境电商店群
- 在PHP中如何为匿名函数指定this？
- 跨境电商店群租用美国站群服务器
本组热帖
最新帖子