哈尔滨网站设计网站抓取频次过高或过低的原因

发布者:admin 时间:2019-03-29

前面青骄网络分享了正常的百度抓取频次,那么过高和过低的原因有哪些呢?青骄网络总结了以下几点:

网站抓取频次过高的原因分析:

1、百度在抓取频次Z高的那天做了更新;

2、百度抓取了大量的无效页面,可以用robots屏蔽下;

3、网站结构不合理,导致蜘蛛抓取循环,爬取不畅;

如果只是偶尔出现了抓取频次过高的现象大家不需要担心,这有可能是网站更新了大量的内容,观察一段时间,一般过几天就会恢复正常(正常的概念是与平时抓取的频次差不多)。如果经常忽高忽低,可以通过网站日志看一下百度蜘蛛是不是爬取了很多无效的链接,如果有,请先用robots.txt屏蔽,再去百度站长平台更新一下robots文件。

网站抓取频次过低的原因分析:

1、长期不更新网站,内容更新不规律,质量残差不齐;

2、新站点,新站点一般会进入百度沙盒期,这期间网站抓取频次将会很低,持续优化即可;

3、设置了抓取上线,如果设置了请改为自动抓取;

4、没有做好链接提交,新产生的链接记得及时提交给百度;

要注意的是在保证网站内容质量的前提下,请尽量不要自己设置抓取频次。百度会根据服务器压力、网站内容质量等自动调节抓取频次,这样做对SEO会比较友好。

微信网站建设分享 新浪网站建设分享 微博网站建设分享 空间网站建设分享

400-110-7006