质上讲如果爬行缓慢您就无法快

[account_disabled]

点善变的关注。很多时候人们说如果你有爬行问题的话真的很容易理解。您登录到转到排除报告然后查看是否处于已发现但当前未编入索引的状态。如果你这样做你就会遇到爬行问题如果你不这样做你就没有爬行问题。在某种程度上这是事实但事情并不那么简单因为这告诉您的是您的新内容是否存在抓取问题。但这不仅仅是让您的新内容被抓取。


您还希望确保您的内容在显着更新时被抓取而 电话数据 这不是您在中看到的情况。但是假设您已经刷新了一篇文章或者您已经完成了重大的技术更新那么只有在抓取并处理该页面后您才会看到这些优化的好处。或者另一方面如果您进行了重大的技术优化但它没有被抓取并且您实际上已经损害了您的网站那么在抓取您的网站之前您不会看到损害。因此从本速失败。因此现在我们需要讨论以一种真正有意义的方式测量抓取因为当您登录时您现在会进入抓取统计报告。




您会看到爬网总数。我对任何说你需要最大化爬行量的人都抱有很大的异议因为爬行总数绝对只是一个虚荣指标。如果我的爬行量增加了倍这并不一定意味着我对我关心的内容的索引增加了倍。它与我的服务器上的重量增加有关这会花费你更多的钱。所以这与爬行的数量无关。这是关于爬行的质量。这就是我们需要开始测量抓取的方式因为我们需要做的是查看创建或更新内容之间的时间以及抓取该内容所需的时间。创建或更新与第一次抓取之间的时间差我称之为抓取效率。