疑惑？百度蜘蛛念旧？删掉的url为什么每天还爬？
一个月前已经删除的链接，现在看log每天都有爬呢？明明每天爬返回码都是404啊，为什么放着那些api+sitemap+手动提交的不去爬？死链已经提交
求各位大神原理！
相关问题
- 百度蜘蛛只抓取网站首页 不抓内页是什么原因？(1 个回答)
- 复制内容如何让搜索引擎快速收录呢？(0 个回答)
- 站点地图读取出错，读取出来是别人的网址(0 个回答)
- 百度蜘蛛不来网站怎么提高浏览量？(2 个回答)
- 搜狗SEO必备！最新Sitemap权限开通指南，提升网站收录率(3 个回答)
- 如何利用百度蜘蛛的来路IP来判断网站的权重？(1 个回答)
- 百度蜘蛛抓取量为什么越来越少？(4 个回答)
- 百度蜘蛛一天来你网站多少次才算不错？(8 个回答)
