<p>查看日志发现最近网站的404很多,我提交了死链之后,反正发现抓取的更多了。</p><p>蜘蛛抓取404的次数也很多,请问大家为什么会这样?我该如何解决?</p><p><br></p>
看看来源是哪个平台的, 如果是百度的要去处理的。 去提交死链
都提交了,或者禁止抓取
把死链都提交了
想快Robots里写入禁止抓取,提交死链的如果url打开是404 后期它也会慢慢不抓
Robots设置禁止抓取相应的404页面 百度站长平台提交404页面
让更多人参与回答