搜外网>搜外问答>问答页面

百度站长资源平台抓取异常有500和504错误,如何排查

https://acg.qunke.com/[?]  百度站长资源平台抓取异常时不时会有一些链接显示500和504错误,但是单独访问这些链接,一点问题都没有。不知道如何排查原因了。请大神们指点一下

链接响应代码错误时间[?]
acg.qunke.com/mobile/product/productview?id=2163006[?]5042020-11-27 11:59:46
acg.qunke.com/mobile/product/productview?id=2287984[?]5042020-11-27 11:59:43
acg.qunke.com/mobile/shop/shopindex?username=hbwanbo[?]5002020-11-27 10:48:29
acg.qunke.com/company/hbtbjx/index[?]5002020-11-27 10:47:49
acg.qunke.com/product?catetype=3&cateid=9153[?]5002020-11-27 10:47:49
acg.qunke.com/mobile/shop/shopindex?member_id=5724[?]5002020-11-27 10:47:22
acg.qunke.com/mobile/shop/shopindex?member_id=5700[?]5002020-11-27 10:47:04
acg.qunke.com/mobile/shop/shopindex?member_id=5729[?]5002020-11-27 10:46:41
acg.qunke.com/mobile/product/productview?id=2759272[?]5042020-11-27 00:40:03
acg.qunke.com/mobile/shop/shopindex?member_id=7002[?]5042020-11-27 00:40:02
追加问题
    3 人参与回答

服务器内部错误

推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo

1、5xx是服务器问题,抓取异常是蜘蛛在爬行网站的时候,恰好出现问题,因此会出现,后来正常了,就能打开了;

2、遭遇抓取异常,后来网站有稳定了,建议整理这些URL,再次提交推送,或者抓取诊断下,告知搜索引擎蜘蛛站点已正常,可再次抓取爬行,同时关注下自身服务器空间稳定性。