先确认页面真的可以访问

用未登录浏览器访问正式 HTTPS 地址,确认返回 HTTP 200,正文和资源正常。临时域名、访问密码、错误证书或服务器异常都会影响抓取。

未知页面应返回真实 404;如果所有错误地址都显示首页并返回 200,可能让搜索平台难以判断页面状态。

  • HTTPS 正常
  • 页面返回 200
  • CSS 与图片可访问
  • 错误地址返回 404

检查是否主动阻止抓取

查看 robots.txt 是否允许访问,页面源码中是否存在 noindex,canonical 是否指向正确的自身地址。

预发布环境常用的禁止抓取设置,上线时必须显式移除;不要只看浏览器画面。

  • robots 规则
  • noindex
  • canonical
  • 主域 301

确认页面有独立价值和入口

每个页面需要独立标题、描述、H1 和真实正文。只有名称不同、正文高度重复的批量页面不利于长期收录。

新页面应从首页、分类页或相关文章通过静态链接到达,不能只放进 sitemap 却在站内完全孤立。

  • 独立主题
  • 真实原创正文
  • 分类与内部链接
  • 移动端可读

合理使用站长平台和 sitemap

在百度搜索资源平台验证正式站点,提交 sitemap 和重点 URL,可以帮助发现页面,但不能代替内容质量和稳定访问。

不要高频重复提交没有变化的地址。上线后关注抓取异常,根据具体状态修复。

  • 站点验证
  • sitemap
  • 重点 URL 提交
  • 抓取异常检查

可以直接使用的检查清单

  • 正式页面返回 200
  • robots 允许抓取
  • 没有 noindex
  • canonical 正确
  • 页面有独立正文
  • 站内有静态入口
  • sitemap 地址可访问
  • 站长平台已验证

常见问题

提交 sitemap 后多久会收录?

没有固定时间。提交主要帮助发现 URL,是否抓取和收录由平台结合网站状态和内容判断。

新站需要每天提交所有页面吗?

通常不需要。保持 sitemap 与内部链接准确,在内容实质更新或新增时提交即可。