网站每次更新没有隔断开,可是网站的蜘蛛爬取页面总是重复的,也有死链接被爬取了,怎么才能停止爬取重复的页面,还有把死链接取消了,我需要怎么做可以?如何把死链接处理掉,能彻底清除干净?感谢回答问题的大佬们
死链接做成文件然后提交百度。
站长提交一下死链试试
提交处理啊,然后等待更新
问题不大,站长提交一下就可以了
不用管·,过段时间就不抓了,或者直接去站长提交
死链的话,应该可以在站长提交一下,其他问题就不清楚了
让更多人参与回答