OAI-SearchBot 是什么:决定你能否出现在 ChatGPT 搜索答案里的爬虫
标注说明:【官方】出自官方文档;【实测】出自本站服务器日志;【推断】由前两者推出或来自第三方。
目录
一句话结论:OAI-SearchBot 是 ChatGPT 搜索的爬虫。想被 ChatGPT 搜到、在回答里被引用,就必须放行它;屏蔽后官方说你不会出现在 ChatGPT 搜索答案里。它不用于训练。
| OAI-SearchBot | |
|---|---|
| 归属 | OpenAI |
| 服务的产品 | ChatGPT 搜索 |
| 用途类型 | AI 搜索索引(决定能否出现在 AI 搜索回答里) |
| 是否遵守 robots | 官方说遵守 |
| 依据 | 官方文档 |
OAI-SearchBot 是谁家的、拿去做什么?#
官方说明:OAI-SearchBot 用于在 ChatGPT 的搜索功能里展示网站;被它排除的网站不会出现在 ChatGPT 搜索答案中,但仍可能作为导航链接出现【官方】。官方建议放行它,并允许来自公布 IP 段的请求【官方】。
robots.txt 修改后,搜索结果大约 24 小时后才调整【官方】。
屏蔽 OAI-SearchBot 会改变什么?#
屏蔽它,你的页面不会出现在 ChatGPT 搜索答案里【官方】。这和训练无关:训练看 GPTBot,二者独立【官方】。
OAI-SearchBot 的 User-Agent 长什么样?#
官方给出的 UA 原文【官方】:
Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.4; +https://openai.com/searchbot
怎么确认来访的真是 OAI-SearchBot?#
对照官方 IP 列表 https://openai.com/searchbot.json【官方】。本站完整 IP 时段 27 次全部落在列表内,匿名时段 61 次的 /24 也都和官方段重合【实测】。
robots.txt 怎么放行或屏蔽 OAI-SearchBot?#
# 放行
User-agent: OAI-SearchBot
Allow: /
# 屏蔽
User-agent: OAI-SearchBot
Disallow: /
本站 15 天里 OAI-SearchBot 来了几次?#
| 2026-10-25 01:00 至 11-08 21:22,北京时间 | 【实测】 |
|---|---|
| 自称 OAI-SearchBot | 88 次 |
| opengeo.page 主站 / 同机其他站点 | 83 / 5 |
| 最后一次 | 2026-11-08 13:49(北京时间) |
| 完整 IP 时段核验通过 | 27 / 27 |
| 匿名时段 /24 重合 / 不重合 | 61 / 0 |
按 UA 子串计数,含冒充者;完整 IP 截至 10-29 23:10,之后只能比 /24。口径见总表。
关于 OAI-SearchBot 的常见误解#
「允许了 GPTBot,ChatGPT 搜索就能引用我。」搜索看的是 OAI-SearchBot【官方】。
「UA 里的版本号必须是 1.4。」官方说版本号会变;本站日志里也有 /1.0,且 IP 都在官方段【实测】。
常见问题#
想出现在 ChatGPT 搜索里,robots.txt 要放行哪个?#
放行 OAI-SearchBot。OpenAI 官方说被它排除的网站不会出现在 ChatGPT 搜索答案中。
改了 robots.txt 多久生效?#
OpenAI 官方说,搜索结果大约在 robots.txt 更新后 24 小时调整。
日志里带 robots.txt 字样的 OAI-SearchBot 是什么?#
那是它专门抓取 robots.txt 文件的请求,官方说会在 UA 里加这个标记。本站 88 次里有 22 次是这种请求。
和 OAI-SearchBot 相关的爬虫#
同公司的其他爬虫#
同用途的其他爬虫#
- Kimi-SearchBot:月之暗面
- Claude-SearchBot:Anthropic
- PerplexityBot:Perplexity
- 全部AI 搜索索引类爬虫与 robots 模板