恶意爬虫会大量占用服务器内存和cpu导致站点运行卡顿,同时会导致网站产生大量无用日志占用存储空间,可以在站点配置文件内输入以下代码直接屏蔽
拦截爬虫代码
# 拦截GPTBot、Facebook爬虫,减少无效日志
if ($http_user_agent ~* "(GPTBot|facebookexternalhit|Meta-ExternalAgent)") {
return 403;
}
关闭日志代码
access_log off;
![图片[1]-拦截GPTBot、Facebook爬虫,减少无效日志-红豆科技-抖佳互动](https://73.douja.cn/wp-content/uploads/2026/08/image-2-1024x467.png)
© 版权声明
文章版权归作者所有,未经允许请勿转载。
THE END


















暂无评论内容