检查爬网统计信息和服务器日志

[kexej28769@nongnue]

请密切关注 Search Console 中提供的抓取统计信息，以确保 Google 正在抓取新网站的页面。通常，当 Googlebot 遇到新页面时，它往往会加快每天抓取的平均页面数量。但如果您在发布日期前后没有看到增加，则可能会对 Googlebot 抓取网站的能力产生负面影响。


Google 搜索控制台上的抓取统计信息

迄今为止，查看服务器日志文件是查找任何 加拿大 WhatsApp 数据 爬行问题或效率低下的最有效方法。像 Botify 和 On Crawl 这样的工具非常有用，因为它们将爬网与服务器日志数据结合起来，并且可以突出显示搜索引擎不爬网的页面、非内部链接的页面（孤立页面）、内部链接较多的低价值页面等。

定期检查抓取错误。
跟踪报告的抓取错误，最好在前几周每天跟踪一次。每天下载这些错误、抓取报告的 URL 并采取必要的操作（即实施额外的 301 重定向、修复软 404 错误）将有助于及早恢复。您不太可能需要重定向所报告的每个 404，但您应该包含最重要的重定向。


专业提示：在 Google Analytics 中，您可以轻松找出请求最多的 404 URL，并首先修复它们！


尝试控制台键和其他有用的功能
检查控制台的其他功能包括阻止资源、结构化数据错误、移动可用性错误、HTML 改进和国际定位（检查 hreflang 报告的错误）。

专业提示：密切关注 URL 参数是否导致重复内容问题。如果是这样，请考虑立即采取一些补救措施。