网站收录怎么又下降了,百度好像抓取出问题了,原因是什么怎么办,所以今天就来分享下哈。
大纲如下:
1、抓取异常是什么?百度抓取异常又是什么?
2、百度抓取异常的原因有哪些?
3、网站抓取异常的原因有哪些?
4、百度抓取异常对网站有什么影响?
5、网站出现抓取异常的解决方法
网站异常原因:
1、dns异常
当百度蜘蛛(Baiduspider)无法解析您网站的IP时,会出现DNS异常。可能是您的 网站IP地址错误 ,或者 域名服务商把Baiduspider封禁了 。
可以用WHOIS或者host查询自己网站IP地址是否正确而且可以解析,如果不正确或无法解析,与域名注册商联系,更新网站IP地址。
2、连接超时
抓取请求连接超时,可能原因是: 服务器过载 或 网络不稳定。
3、抓取超时
抓取请求连接建立后,下载页面速度 过慢 ,导致超时。可能原因服务器过载, 带宽不足 。
4、连接错误
无法连接或者连接建立后对方服务器拒绝。
链接异常原因:
1、访问被拒绝
爬虫发起抓取,httpcode返回码是403。
2、找不到页面
爬虫发起抓取,httpcode返回码是404。
网站抓取异常的原因有哪些?
网站抓取异常的原因主要有以下五个方面:
1、服务器异常
服务器连接异常最大的可能是网站服务器过大,超负荷运转,通过检查浏览器输入你的域名是否正常访问。服务器异常会导致蜘蛛无法连接网站服务器,导致出现抓取失败。
2、域名过期
域名过期网站肯定不能访问,域名解析就会失效了。如果存在这类情况,你可以与你域名注册商联系解决,看是否被抢注,还是可以续费回来。