网站日志中蜘蛛反馈出现500 服务器日志正常
发现一个问题,从网站FTP上下载的网站日志分析中 百度蜘蛛爬虫返回的状态码是500或504,运维的那边查看服务器日志说是全部正常,这是什么原因呢
6 人参与回答
我的微信:sec_vip 等 1 人赞同该回答
可能是不稳定吧
我的微信:sec_vip 等 1 人赞同该回答
就是从百度抓取那里看到的 然后去查看的网站日志 服务器没权限 运维反馈的是没有问题,那就不得而知了
我的微信:sec_vip 等 1 人赞同该回答
服务器不稳定
我的微信:sec_vip 等 1 人赞同该回答
可以看看服务器带宽资源是否充足
我的微信:sec_vip 等 1 人赞同该回答
500(服务器未响应,一般由服务器维护和出故障,网站打不开时出现的)
我的微信:sec_vip 等 1 人赞同该回答
从百度抓取异常那里看看,是否也存在500错误。 个人认为是服务器不稳定造成的。蜘蛛访问服务器的时候正好服务器不稳定。我们访问的时候确又好好的。 可以看看服务器带宽资源是否充足。