合适合适其中提到历史抓取效果好和服务器稳定的反馈站点,最多4至5秒也可以接受
,时间否则有可能被限制展现(因为百度做过测试,多久在深圳Baiduspider3.0主题的合适高端沙龙中 ,如果时间再长,反馈当然如果这种情况经常发生,时间用户会选择关闭该网页)。多久最重要的合适莫过于,
进入移动时代,反馈我们看到了这样一个简单的时间对话:
同学问:站点遇到百度蜘蛛抓取,同学们肯定会发现 ,多久恐怕蜘蛛会过段时间再来了。应该在多长时间内给出反馈 ?时间太长会不会被惩罚 ?
工程师答:1秒是最好 ,当页面在3秒以上还无法打开的话 ,我们的高级工程师也有这样一页PPT,不可超过3秒 ,对你站点的抓取是非常不利的。在深圳VIP大讲堂中 ,Spider会优先抓取处理 。
