Bot 库管理
用来识别爬虫 / 机器人,方便你在白名单、例外、规则里按 Bot 名称或分类来放行或拦截。
面板入口:观测 → Bot 库管理。

识别从哪来
- 本地 Bot 档案(自建 + 内置种子)
- 远程签名库(面板可同步,补充识别)
- UA 启发式(例如是否像 bot)
怎么加本地 Bot
- 打开 Bot 库,点新建
- 填 名称,至少选 1 个 分类
- UA 模式:每行一条(普通子串,或按面板提示写正则)
- 备注可选;内置项不要乱改坏
- 保存

常见分类(白话)
| 分类 | 含义 |
|---|---|
| 搜索引擎 | Google、Bing、百度等 |
| 探测平台 | UptimeRobot、SEO 探测等 |
| 社交平台 | 社交预览爬虫 |
| 爬虫程序 | curl、各类 HTTP 库 / 通用爬虫 |
| 恶意 Bot | 明确恶意 |
| AI工具 | GPTBot、Claudebot 等(可自建) |
| 内部程序 | 站点自身回调类 UA(可自建) |
| 其他 | 系统预留兜底 |
首次安装会预置较完整的 Bot 档案(搜索引擎、社交、探测、爬虫、AI 等);可按需增删改,不需要的禁用即可。
分类管理
可新建显示名、排序。分类标识创建后不要乱改;别占用系统预留的「其他」。
远程库
面板有查看 / 同步入口,用来补充识别签名,同样不会自动拦截。
推荐用法
- 放行搜索引擎:白名单条件「Bot 分类 = 搜索引擎」(可再限路径)
- 观察可疑爬虫:规则「像 bot」且「不是已知库」→ 观察
- 拦恶意类:Bot 分类 = 恶意 → 拦截或挑战
完整步骤:放行合法爬虫。
注意
- 以为加了 Profile 就会自动拦 → 不会
- UA 模式写太宽,普通浏览器也会被标成 Bot
- CDN 真实 IP 配错时,日志和部分校验会失真