新建的网站有半月了,为什么百度蜘蛛抓取全部显示为404?百度抓取了很多404,怎么知道百度蜘蛛是从哪些页面抓到的?如何不让蜘蛛抓取404页面?
404页面做个文档提交给百度
把你的404页面整理到txt文档里,然后提交死链。也可以在Robots里设置禁止访问某一个位置的文档
让更多人参与回答