页面被 robots.txt 屏蔽怎么办
快速答案
检查 robots.txt 的 Disallow 规则，允许抓取后等待 Google 重新抓取。
User-agent: *
Allow: /
使用要点
- 先检查实际响应头和页面源码，再改 sitemap、robots 或重定向规则。
- 同一个 URL 不要同时被 noindex、canonical 和重定向表达成不同意图。
相关内容
相关内容
- 301 和 302 重定向怎么选 301 和 302 重定向怎么选：永久迁移用 301，临时活动或 A/B 测试用 302。 包含处理方向、验证方式和相关 SEO、建站工具入口。
- 404 页面会影响 SEO 吗 404 页面会影响 SEO 吗：少量正常 404 不会伤害整站；重要旧 URL 应做 301 到新页面。 包含处理方向、验证方式和相关 SEO、建站工具入口。
- AdSense 首次审核要注意什么 AdSense 首次审核要注意什么：保证有原创内容、清晰导航、隐私政策和稳定访问，不要只放空工具壳。 包含处理方向、验证方式和相关 SEO、建站工具入口。
- 内链锚文本应该怎么写 内链锚文本应该怎么写：锚文本描述目标页主题，避免大量使用“点击这里”。 包含处理方向、验证方式和相关 SEO、建站工具入口。
- 面包屑结构化数据怎么写 面包屑结构化数据怎么写：用 BreadcrumbList 标明层级和 URL，和页面导航保持一致。 包含处理方向、验证方式和相关 SEO、建站工具入口。
- 面包屑导航有必要吗 面包屑导航有必要吗：内容层级多的网站建议加，能帮助用户和搜索引擎理解结构。 包含处理方向、验证方式和相关 SEO、建站工具入口。