当前位置:首页 > 个人杂谈 > 正文内容

百度抓取诊断恢复正常了

作者: 葛屹肃 | 日期: 2022-11-21 | 分类: 个人杂谈

11月18日,记录了百度抓取诊断失败原因,是由于robots封禁所造成的,之后每天有测试抓取是否恢复,3天过去了,今天测试时,发现百度抓取诊断已恢复正常。

百度抓取诊断恢复正常了

其实,当时也知道是原因是由于设置过robots封禁后,蜘蛛那边留有缓存,等缓存时间过了,才会恢复正常抓取。

缓存周期有长有短,短的话1天即可,长的话要2周。而我的要3天时间,这个时间也合理,大多数站长反馈也是3天左右的。

抓取正常并不代表就能恢复到以往的抓取频次,未封禁抓取前,每天抓取频次300左右,而现在只有可怜的2,3次,至于抓取诊断恢复后,估计抓取频次会有所提高,但要恢复以往的,还需要一段时间吧。

设置robots封禁有半个月时间,这个时间的确有点长,从第一天起,蜘蛛就没来网站抓取了,早已成为习惯。现在要重新让蜘蛛过来抓取,等于烧一壶水,烧到70度停电了,过了2小时又来电,那烧水只能重新开始,并不会从70度继续烧的。

更何况,网站一直以来很少做外链,一旦设置封禁,等同于与世隔绝,很快会被蜘蛛所遗忘的。

当然,上述情况都是小编的猜测而已,至于实情如何,等过几天抓取频次出来后,再与大家分享。

版权声明:本文由〖一速网〗发布,转载请注明出处!
文章链接:https://www.geyisu.com/2914.html

  • 评论:(0)

已有 0 位网友发表了一针见血的评论,你还等什么?

◎欢迎大家参与讨论

站内搜索