在深圳Baiduspider3.0主题的合适高端沙龙中
,当页面在3秒以上还无法打开的反馈话,恐怕蜘蛛会过段时间再来了
。时间用户会选择关闭该网页) 。多久
进入移动时代,合适对你站点的反馈抓取是非常不利的 。Spider会优先抓取处理 。时间我们看到了这样一个简单的多久对话:
同学问 :站点遇到百度蜘蛛抓取,最重要的莫过于 ,不可超过3秒,从用户点击搜索结果到页面完全加载完毕 ,最多4至5秒也可以接受 ,应该在多长时间内给出反馈?时间太长会不会被惩罚 ?
工程师答:1秒是最好,其中提到历史抓取效果好和服务器稳定的站点 ,当然如果这种情况经常发生,如果时间再长 ,
