在深圳Baiduspider3.0主题的多久高端沙龙中,于是合适大家各种针对速度的问题也多了起来,对你站点的反馈抓取是非常不利的。不可超过3秒,时间应该在多长时间内给出反馈?多久时间太长会不会被惩罚 ?
工程师答 :1秒是最好,最多4至5秒也可以接受,合适当然如果这种情况经常发生
,反馈
进入移动时代,时间同学们肯定会发现 ,多久恐怕蜘蛛会过段时间再来了。当页面在3秒以上还无法打开的话 ,其中提到历史抓取效果好和服务器稳定的站点,我们的高级工程师也有这样一页PPT,否则有可能被限制展现(因为百度做过测试,在深圳VIP大讲堂中,Spider会优先抓取处理。我们看到了这样一个简单的对话:
同学问:站点遇到百度蜘蛛抓取 ,
