trends.google.com 的Robots检测结果

检测robots.txt规则与sitemap可用性

实时查询 · 2026-11-22 21:02:01

robots.txt 概况

地址https://trends.google.com/robots.txt
状态200 存在
规则条数2
声明 Sitemap0
全站屏蔽否

抓取规则

User-agent指令路径
*Disallow/explore?
*Disallow/trends/explore?

robots.txt 原文

展开查看
# trends.google.com/robots.txt

User-agent: *
Disallow: /explore?
Disallow: /trends/explore?

Sitemap 检测

Sitemap 地址状态内容
https://trends.google.com/sitemap.xml404-

Robots 检测

使用方法

  1. 输入域名
  2. 查看 robots.txt 规则和 Sitemap 检测结果

常见问题

Disallow: / 是什么意思?
表示禁止所有搜索引擎抓取整站,上线后务必检查是否误设置。