当前位置:seo优化 > seo教程 > seo技术 > 百度蜘蛛不停的访问抓取网站,抓取量突增有哪些原因

百度蜘蛛不停的访问抓取网站,抓取量突增有哪些原因

作者:beylze 44℃ 暂无评论

有事,我们在查询百度统计的时候,会发现百度蜘蛛抓取量突然暴增,带宽低的话就造成网站正常访问有问题,那么,百度蜘蛛抓取量突增有哪些原因呢?

百度蜘蛛.jpg

百度蜘蛛抓取量突增有哪些原因?

1、网站反链多权重高,网站持续有规律的产生高质量的原创内容,搜索引擎调度程序会持续的抓取网站。

2、检查网站访问日志中的百度蜘蛛访问是否正常,以防有人恶意冒充百度蜘蛛频繁访问抓取网站。

3、百度蜘蛛会根据站点规模、历史上网站每天新产出的链接数量、已抓取网页的综合质量打分等等,来综合计算抓取流量,同时兼顾站长在抓取频次工具里设置的、网站可承受的最大抓取值。

4、百度蜘蛛发现站内JS代码较多,调用大量资源针对JS代码进行解析抓取。

5、百度其他部门(如商业、图片等)的蜘蛛在抓取,但流量没有控制好。

6、站点被攻击。

7、已抓取的链接,打分不够好,垃圾过多,导致蜘蛛重新抓取。


转载请注明: http://www.beylze.com/news/329.html
喜欢 ()or分享