我用光年查看日志,用户状态码和蜘蛛状态码,出现很多404,但这些404的路径并不存在(都是图片路径/a/b/c.jpg这类)。
我网站自己上传的图片和文件都正常显示的。1、蜘蛛和用户通过哪里,抓到这些不存在的路径呢?2、我怎么删除这些路径?
进来学习了,,
做404或者写Robots进行屏蔽抓取
让更多人参与回答