许多 AI 蜘蛛（如 Bytespider、GPTBot 等）抓取频率极高，会瞬间拉高服务器的 CPU 和带宽。以下是针对宝塔面板（Nginx 环境）的三种防御方案。

方案一：修改 Nginx 配置文件

直接在 Web 服务器层级拦截 User-Agent，恶意请求不会进入应用层，对服务器保护效果最好。

1. 进入宝塔面板 “网站” 列表。
2. 点击对应站点的 “设置” -> “配置文件”。
3. 在 server 区域内（建议在 access_log 之后）插入以下拦截代码：

拦截常见恶意 AI 蜘蛛和采集器

if ($http_user_agent ~* (Bytespider|CCBot|GPTBot|ClaudeBot|ImagesiftBot|CommonCrawl|PerplexityBot|PetalBot|Amazonbot|Claude-Web)) {
    return 403;
}

4. 点击 “保存” 即可生效。

方案二：利用“Nginx防火墙”插件（可视化操作）

如果您不希望手动修改代码，可以使用宝塔面板自带的插件：

1. 在 “软件商店” 安装并打开 “Nginx防火墙”。
2. 点击 “全局配置” -> “User-Agent过滤”。
3. 点击 “添加” 按钮。
4. 在正则匹配框中输入蜘蛛关键词（如 Bytespider），动作选择 “阻断”。
5. 进阶： 如果您的业务仅限国内，建议在插件中开启 “禁止海外访问”，可以过滤掉绝大多数来自境外的 AI 爬虫。

附录：建议屏蔽的常见 AI 蜘蛛列表