输入复制码,即可复制
关注 公众号 发送 复制码 即可获取
只需要3秒时间
查看: 87|回复: 0

百度蜘蛛抓取失败的流量影响有哪些

[复制链接]

56

主题

464

帖子

570

积分

小生

Rank: 3Rank: 3

积分
570
发表于 2014-1-26 20:59 | 显示全部楼层 |阅读模式
尽量的保证您的网站不乱,如果需要且则换服务,需要暂时让旧服务能够使用一段时间,而且做301 跳转,尽量减少改版带来的流量损失踪。虽然百度在对301跳转的响应周期较长,但我们仍是举荐巨匠这么做。
三、站点服务不不调动换服务
参考资料:见问题解答

首先,我们会按照站点的规模,访谒量等信息,成立一个合理的站点抓取压力。可是会有一些破例,在压力节制欠好的情形下,处事器会凭证自身负荷进行呵护性的无意封禁,对于这样的情况,若是压力过大,请在返回码中尽量不要使用404,建议返回寄义是“这样百渡过段时刻再来考试考试抓取这个链接,假如阿谁时间站点余暇,那它就会被成功抓取了。平安有用的减肥药
除了以上介绍的典型封禁,还有一些其他非典型的,好比:refer、ua作弊、js等,这些封禁城市导致百度失败,从而把已经抓到的页面进行删除,或者不能成功抓取新页面,这样会直接影响到网站的流量。
一、禁 对于百度引擎的ua或者IP进行封禁,会导致百度不能成功抓取您的站点,从而不能成功抓取新上网页,以及将之前已经抓到的页面剖断为死链,并会进行清理,这样最终导致站点获得的流量削减。此外,还会有一些假充百度抓取和采集,可以使用DNS反查体例来确定抓取来历的ip是否属于百度,防止误封禁。
最后,但愿站长尽量连结站点的稳定,对于暂时不想被百度抓取的页面,使用正确的返回码奉告百度,如果确实不想被百度抓取或者索引,可以写息见告。
二、压力过年夜的偶然封禁
温馨提示:
1、本内容转载于网络,版权归原作者所有!
2、本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
3、本内容若侵犯到你的版权利益,请联系我们,会尽快给予删除处理!
您需要登录后才可以回帖 登录 | 注册

本版积分规则

客服QQ/微信
860820528 周一至周日:09:00 - 22:00
十五年老品牌,学习网上创业赚钱,首先阿抖学社,值得信赖!
阿抖学社 版权所有!

本站内容均转载于互联网,并不代表阿抖学社立场!
拒绝任何人以任何形式在本站发表与中华人民共和国法律相抵触的言论!

小黑屋|广告服务|加入vip|APP下载|手机版| 阿抖学社 ( 蜀ICP备14032121号-4 ) |网站地图

GMT+8, 2025-5-8 04:54 , Processed in 0.072861 second(s), 29 queries .

快速回复 返回顶部 返回列表