拦截GPTBot、Facebook爬虫,减少无效日志

拦截GPTBot、Facebook爬虫,减少无效日志

恶意爬虫会大量占用服务器内存和cpu导致站点运行卡顿,同时会导致网站产生大量无用日志占用存储空间,可以在站点配置文件内输入以下代码直接屏蔽

拦截爬虫代码

    # 拦截GPTBot、Facebook爬虫,减少无效日志
    if ($http_user_agent ~* "(GPTBot|facebookexternalhit|Meta-ExternalAgent)") {
        return 403;
    }

关闭日志代码

access_log off;
图片[1]-拦截GPTBot、Facebook爬虫,减少无效日志-红豆科技-抖佳互动

© 版权声明
THE END
喜欢就支持一下吧
点赞12 分享
评论 抢沙发

请登录后发表评论

    暂无评论内容