站长资讯正文

关于日志分析中的404误报问题

可能蜘蛛过来抓取的时候,网站刚好打不开。 如果日志里显示404的链接,你查询HTTP状态码显示是200,则没事,服务器稳定的话,下次应该就是200了。

多半是服务器的不稳定造成。

如果是服务器不稳定,返回的状态码应该是503、500类的!为什么会返回404? 查看蜘蛛状态码的时候,再看看用户状态码!如果你发现的页面用户状态码返回的是200 就不用紧张,再去仔细分析原因!因为这个时候用户体验是不受影响的!

绝对误抓我也碰到了

最好的办法只有一个,就是你自己打开报有404页面看能不能打开,如果能打开就说明服务器不稳定导致的。


相关阅读