百度抓取频次注意事项以及抓取频次过大、过小的解决方法
1、抓取频次说明
单位时间(日)搜索引擎对Web服务器的抓取总次数。
2、需要注意的事项
百度将根据网站服务器的压力自动调整抓取频次。
过度的抓取频次:服务器变得不稳定,很可能影响正常的网站访问。
抓取的频次太小了,影响网站的收录。
过度的抓取频次:服务器变得不稳定,很可能影响正常的网站访问。
抓取的频次太小了,影响网站的收录。
3、现在的抓取频次太高的话怎么办?
如果没有被抓取价值的页面过多,可以更新网站的robots文件。
适当调整抓取频次的上限。
适当调整抓取频次的上限。
4、现在的抓取频次太小的话怎么办?
取消或调整抓取频次的上限。为了支持诊断,使用手套工具;使用资源发送工具积极发送资源。
资源统计-抓取频次-抓取泳频次上限调整
使用抓取异常工具辅助诊断;通过资源提交工具主动提交资源。
资源统计—抓取频次—抓取频次上限调整
资源统计-抓取频次-抓取泳频次上限调整
使用抓取异常工具辅助诊断;通过资源提交工具主动提交资源。
资源统计—抓取频次—抓取频次上限调整