阿里巴巴的爬虫:神马 YisouSpider 有说明,通义千问没有

· 约 3 分钟 · 作者

标注说明:【官方】出自官方文档;【实测】出自本站服务器日志;【推断】由前两者推出或来自第三方。

目录
  1. 阿里巴巴有哪些爬虫?
  2. 阿里巴巴官方公开了什么?
  3. 听不听 robots、能不能核验?
  4. 本站 15 天里阿里巴巴的爬虫来了几次?
  5. 一次放行或屏蔽阿里巴巴的全部爬虫
  6. 和阿里巴巴相关的页面
    1. 阿里巴巴的爬虫详情
    2. 同用途的其他公司爬虫
    3. 其他

一句话结论:阿里巴巴这边,有官方说明的只有神马搜索的 YisouSpider,而且官方页只给了一个名字;通义千问、夸克联网时用什么爬虫,阿里没有公开。

阿里巴巴有哪些爬虫?#

爬虫UA 里的名字用途依据本站 15 天访问【实测】
YisouSpiderYisouspider搜索引擎官方文档1
TongyiBotTongyiBot官方未公开第三方来源0

日志截至 2026-11-08 21:22(北京时间),按 UA 子串计数,含冒充者。

阿里巴巴官方公开了什么?#

神马站长平台的官方页写着「神马搜索的爬虫 user agent 是 yisouspider」,并说「对正常网页放开 robots.txt 限制」【官方】。这页发布于 2014 年,没有完整 UA、没有 IP 段,也没有明确的遵守声明;本表的完整 UA 来自第三方整理 itlanyan.com【推断】。

通义千问没有爬虫文档【官方】,TongyiBot、QwenBot、Qwen-User 都来自第三方目录 traceten.com【推断】。夸克、千问联网时是否借用神马的索引,阿里没有说明【官方】。本站唯一一次 YisouSpider 请求在匿名 IP 时段,无法核验【实测】。

听不听 robots、能不能核验?#

爬虫是否遵守 robots官方 IP 列表本站核验【实测】
YisouSpider官方未说明未公布1 次中 0 次不通过,1 次无法核验
TongyiBot官方未说明未公布未出现

本站 15 天里阿里巴巴的爬虫来了几次?#

阿里巴巴的 2 个条目在本站 15 天里合计 1 次,最多的是 YisouSpider(1 次);能核验的部分没有发现冒充;TongyiBot 一次都没出现【实测】。

一次放行或屏蔽阿里巴巴的全部爬虫#

# 屏蔽阿里巴巴的全部爬虫
User-agent: Yisouspider
User-agent: TongyiBot
Disallow: /
# 放行阿里巴巴的全部爬虫
User-agent: Yisouspider
User-agent: TongyiBot
Allow: /

其中 TongyiBot 不是官方公布的名字,写进去也可能匹配不到任何请求【推断】。

阿里巴巴的爬虫详情#

同用途的其他公司爬虫#

其他#