阿里巴巴的爬虫:神马 YisouSpider 有说明,通义千问没有
标注说明:【官方】出自官方文档;【实测】出自本站服务器日志;【推断】由前两者推出或来自第三方。
目录
一句话结论:阿里巴巴这边,有官方说明的只有神马搜索的 YisouSpider,而且官方页只给了一个名字;通义千问、夸克联网时用什么爬虫,阿里没有公开。
阿里巴巴有哪些爬虫?#
| 爬虫 | UA 里的名字 | 用途 | 依据 | 本站 15 天访问【实测】 |
|---|---|---|---|---|
| YisouSpider | Yisouspider | 搜索引擎 | 官方文档 | 1 |
| TongyiBot | TongyiBot | 官方未公开 | 第三方来源 | 0 |
日志截至 2026-11-08 21:22(北京时间),按 UA 子串计数,含冒充者。
阿里巴巴官方公开了什么?#
神马站长平台的官方页写着「神马搜索的爬虫 user agent 是 yisouspider」,并说「对正常网页放开 robots.txt 限制」【官方】。这页发布于 2014 年,没有完整 UA、没有 IP 段,也没有明确的遵守声明;本表的完整 UA 来自第三方整理 itlanyan.com【推断】。
通义千问没有爬虫文档【官方】,TongyiBot、QwenBot、Qwen-User 都来自第三方目录 traceten.com【推断】。夸克、千问联网时是否借用神马的索引,阿里没有说明【官方】。本站唯一一次 YisouSpider 请求在匿名 IP 时段,无法核验【实测】。
- 官方文档(YisouSpider):https://zhanzhang.sm.cn/open/optimizaGuide
- 第三方资料(TongyiBot):https://traceten.com/crawlers/alibaba-tongyibot
听不听 robots、能不能核验?#
| 爬虫 | 是否遵守 robots | 官方 IP 列表 | 本站核验【实测】 |
|---|---|---|---|
| YisouSpider | 官方未说明 | 未公布 | 1 次中 0 次不通过,1 次无法核验 |
| TongyiBot | 官方未说明 | 未公布 | 未出现 |
本站 15 天里阿里巴巴的爬虫来了几次?#
阿里巴巴的 2 个条目在本站 15 天里合计 1 次,最多的是 YisouSpider(1 次);能核验的部分没有发现冒充;TongyiBot 一次都没出现【实测】。
一次放行或屏蔽阿里巴巴的全部爬虫#
# 屏蔽阿里巴巴的全部爬虫
User-agent: Yisouspider
User-agent: TongyiBot
Disallow: /
# 放行阿里巴巴的全部爬虫
User-agent: Yisouspider
User-agent: TongyiBot
Allow: /
其中 TongyiBot 不是官方公布的名字,写进去也可能匹配不到任何请求【推断】。
和阿里巴巴相关的页面#
阿里巴巴的爬虫详情#
- YisouSpider:搜索引擎
- TongyiBot:用途官方未公开