查看网站日志发现百度抓取404，但网页可以正常打开是怎么回事 悬赏5元 已结束
116.179.32.177 - - [26/Aug/2020:19:03:24 +0800] "GET /www.hupaige.com/2315.html HTTP/1.1" 404 25182 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"
有好多条类似的，返回404
11 人参与回答
这样是看不出来的
这种一般不用管的
首先你这种情况要分几方面来验证一下：
1、首先先确认抓取路径是否存在，验证是否是百度蜘蛛，确认无误后检查是否封禁了抓取404的蜘蛛，均正确的话应该就是服务器的事了。目前这个路径是存在的，需要你验证一下百度蜘蛛，其次虽然封禁蜘蛛不太可能出现404死链状态的。
2、从自身排查，排查域名、服务器，域名是否可以外地访问，就是说出了你这台电脑在别的地方能不能访问，我也有过类似经历，就是本地能访问，给其他人就不能访问，这个需要排查一下，用站长工具ping一下。虽然可以打开你的网站，但是不保证其他地方是否正常。
3、检查服务器的负载是多少，也有可能蜘蛛来的数量较多，当时你的网站造成影响，导致你的服务器负载无法打开。
4、以上问题如果都排查了一切正常的话就开始反馈给百度了，在百度搜索资源平台中提交反馈信息，等待百度回复即可
能打开就行
我也遇见过这种情况：
1.首先你这个页面能不能打开
2.在是百度站长平台抓取诊断下
3.是不是别人采集或者扫秒你的站点假蜘蛛
4.可以nslookup测试一下是真蜘蛛还是假蜘蛛
5.如果是真蜘蛛可以在百度站长平台反馈下
是不是被恶意扫描了呢 ？建议直接拉黑
