百度抓取诊断恢复正常了

11月18日，记录了百度抓取诊断失败原因，是由于robots封禁所造成的，之后每天有测试抓取是否恢复，3天过去了，今天测试时，发现百度抓取诊断已恢复正常。

其实，当时也知道是原因是由于设置过robots封禁后，蜘蛛那边留有缓存，等缓存时间过了，才会恢复正常抓取。

缓存周期有长有短，短的话1天即可，长的话要2周。而我的要3天时间，这个时间也合理，大多数站长反馈也是3天左右的。

抓取正常并不代表就能恢复到以往的抓取频次，未封禁抓取前，每天抓取频次300左右，而现在只有可怜的2,3次，至于抓取诊断恢复后，估计抓取频次会有所提高，但要恢复以往的，还需要一段时间吧。

设置robots封禁有半个月时间，这个时间的确有点长，从第一天起，蜘蛛就没来网站抓取了，早已成为习惯。现在要重新让蜘蛛过来抓取，等于烧一壶水，烧到70度停电了，过了2小时又来电，那烧水只能重新开始，并不会从70度继续烧的。

更何况，网站一直以来很少做外链，一旦设置封禁，等同于与世隔绝，很快会被蜘蛛所遗忘的。

当然，上述情况都是小编的猜测而已，至于实情如何，等过几天抓取频次出来后，再与大家分享。