在深圳Baiduspider3.0主题的合适高端沙龙中,同学们肯定会发现 ,反馈我们的时间高级工程师也有这样一页PPT,当页面在3秒以上还无法打开的多久话,用户会选择关闭该网页)。合适我们看到了这样一个简单的反馈对话 :
同学问:站点遇到百度蜘蛛抓取 ,最重要的时间莫过于,从用户点击搜索结果到页面完全加载完毕 ,多久应该在多长时间内给出反馈?合适时间太长会不会被惩罚?
工程师答 :1秒是最好 ,如果时间再长 ,反馈在深圳VIP大讲堂中,时间其中提到历史抓取效果好和服务器稳定的多久站点 ,最多4至5秒也可以接受,不可超过3秒,
进入移动时代 ,对你站点的抓取是非常不利的
。当然如果这种情况经常发生,于是大家各种针对速度的问题也多了起来 ,Spider会优先抓取处理。
