index.baidu.com 的Robots检测结果

检测robots.txt规则与sitemap可用性

实时查询 · 2026-11-21 18:50:12

robots.txt 概况

地址https://index.baidu.com/robots.txt
状态200 存在
规则条数3
声明 Sitemap0
全站屏蔽否

抓取规则

User-agent指令路径
*Disallow/static
*Disallow/main
*Disallow/lib

robots.txt 原文

展开查看
User-agent: *
Disallow: /static
Disallow: /main
Disallow: /lib

Sitemap 检测

Sitemap 地址状态内容
https://index.baidu.com/sitemap.xml2000 个 URL

Robots 检测

使用方法

  1. 输入域名
  2. 查看 robots.txt 规则和 Sitemap 检测结果

常见问题

Disallow: / 是什么意思?
表示禁止所有搜索引擎抓取整站,上线后务必检查是否误设置。