1、服务器不稳定
2、网站程序有问题
3、robots.txt文件里设置了拒绝百度蜘蛛抓取的代码
4、网站被黑,不能访问。
5、百度蜘蛛访问链接时发生跳转,跳转后链接超长或者连续跳转超过5次,就会发生重定向错误从而导致抓取失败
6、由于服务器线路不同,百度蜘蛛抓取的速度可能发生延迟,就会产生明明可以正常访问,却出现抓取失败的情况。一般这种情况需要定期检测服务器各地的访问速度,优化网站的打开访问速度。
7、无法解析IP造成dns异常:当百度蜘蛛无法解析您网站IP时就会出现dns异常,可以使用WHOIS查询自己网站IP是否能被解析,如果不能需要联系域名注册商解决。
8、IP封禁:IP封禁就是限制该IP,只有在特定情况下才会进行此操作,所以如果希望网站百度蜘蛛正常访问您的网站最好不要进行此操作。
9、死链:表示页面无效,无法提供有效的信息,这个时候可以通过百度站长平台提交死链。