一般抓取失败有两个原因:
1.网站更换了服务器ip,百度的抓取还是上一台服务器的地址导致,但是这仅仅会发生在搬家的那几天,等网站搬家完成后,百度蜘蛛还是会抓取成功
2.服务器不稳定,有些客户喜欢用香港或者国外服务器,贪便宜会买一些小厂的服务器,经常容易打不开,所以这里我建议大家,尽量放国内,服务器也尽量选择有保障的大厂。
检查完我发现这两种情况,这个网站都没有,网站没有搬过家,服务器也很稳定,那究竟是什么原因呢,进服务器看了网站日志,一条状态码302引起了我的注意,我立马去检查了他的网站重定向,问题终于找到了,客户操作失误,将301重定向设置成了302重定向
301重定向是吧一个网址永久跳转到另一个网址
302重定向则是临时将一个网址定向到另外一个网址
302定向如果使用不当则会出现这个客户的现象,所以大家在操作网站优化时候,这些细节一定要注意。