如题。百度蜘蛛抓取的都是死链,不是404页面链接。且这些死链都是已经提交过百度,收录是查不到这些死链,就是不知道是不是百度还有数据库保存了这些链接反复去抓取。这些死链是网站改变前的链接。现在是4月10号之后的日志都没看到百度蜘蛛了。怎么处理?www.nicerf。Cn
这种情况删除提交比较好吧
检查检查内部链接设置
这种不会被收录,如返回码不是404,就可能被放出收录的
路过,进来看看。。。
我们的是新站,网站日志分析后,看到了好多404页面,都是什么新加坡,亚太地区的IP,不知道什么原因。
1、网站抓取死链,不是404页面,这个是啥意思,是返回码不是404吗。只要抓取的链接返回码404,这种不会被收录,如返回码不是404,就可能被放出收录; 2、网站日志没有新的URL抓取,可Site域名,看看是否有原先死链接放出,放出就死链接提交删除,新的URL推送提交,蜘蛛池,收录宝来引蜘蛛。
让更多人参与回答