发现一个问题，从网站FTP上下载的网站日志分析中 百度蜘蛛爬虫返回的状态码是500或504，运维的那边查看服务器日志说是全部正常，这是什么原因呢
可能是不稳定吧
就是从百度抓取那里看到的 然后去查看的网站日志 服务器没权限 运维反馈的是没有问题，那就不得而知了
服务器不稳定
可以看看服务器带宽资源是否充足
500(服务器未响应，一般由服务器维护和出故障，网站打不开时出现的)
从百度抓取异常那里看看，是否也存在500错误。 个人认为是服务器不稳定造成的。蜘蛛访问服务器的时候正好服务器不稳定。我们访问的时候确又好好的。 可以看看服务器带宽资源是否充足。
让更多人参与回答
