搜外网>搜外问答>问答页面

蜘蛛一直抓取之前未改版前的链接，造成一大堆死链，要如何处理

微信

网站改版快一年了，之前是用WordPress建站，后面代码给改了，是去年3月份改版的，到现在已经快一年了，从站点日志里面看到蜘蛛一直在抓取旧站链接，也有整理过一大堆死链提交了，也在robots里面禁止蜘蛛爬行，但是蜘蛛还是一直都有在抓取，随便都是上千条死链，是哪个地方出错了吗？要如何让蜘蛛更新数据库，抓取新的链接？


追加问题
数据库 Robots WordPress 代码 举报 2022-01-24 发布180 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    5 人参与回答
孟
孟

做好404 把死链收集起来提交百度平台

4 个月前 赞同 0 评论 0
收藏 举报
评论取消
素材网
素材网 · 素材网，网站模板，网站素材，视频教程，sucaipro。com

不太清楚呢 ，

4 个月前 赞同 0 评论 0
收藏 举报
评论取消
晓迪
晓迪 · 百果园加盟

做好404 把死链收集起来提交百度平台

4 个月前 赞同 0 评论 0
收藏 举报
评论取消
推推蛙
推推蛙 · 擅长SEOSEM网站诊断、方案编写、优化运维。微信：tuituiwaseo

1、不建议整站屏蔽页面，是否已屏蔽抓取，可以Robots里面的页面检测看看，是否已封禁； 

2、网站改版，出现大量死链也是正常的，有死链做死链提交删除就好，页面返回码是404，搜索引擎后期也会删死链，不建议封禁屏蔽； 

3、新的页面，做好基础站内外seo，做好提交推送，提升域名信任度，后期蜘蛛会识别发现新的URL。

ps：做好404页面，做好基础优化和死链提交删除，新的URL推送

4 个月前 赞同 0 评论 0
收藏 举报
评论取消
西瓜号
西瓜号

看看大神是怎么回复的吧

4 个月前 赞同 0 评论 0
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
  • 新建的网站一直不收录内页是怎么回事？？
  • 同一个页面，核心词排名靠前，核心词的长尾词却排名会更靠后
  • 现在百度几号更新索引？我的站点yashengkj.cn显示1900多，但是却只有100来个，哪里出问题
  • 站长工具出问题了？
  • 我想放假前再看到一次索引更新
  • 为什么每次蜘蛛只爬首页？
  • 不带www的首页收录怎么删除
  • 收录不稳定，你们最近也有这种情况吗
  • 网址要关掉一段时间，有什么办法不危害网站收录
  • 能帮忙看一下，这个模板对seo友好吗？

    • 专栏文章

  • SEO术语：零基础学SEO，需要掌握的要点！
  • 多元化内容和多样化媒体渠道是社交媒体营销新趋势
  • 2017年最新百度快速收录新站技巧!
  • 云南SEO：三条链接轻松做seo优化排名
  • 抖音SEO，你知道吗？没错！抖音短视频也可以做SEO
  • 云南昆明SEO企业网站怎么优化？
  • 云南昆明SEO浅谈网站seo优化的20个问题
  • 蜘蛛进行网站日志爬行参数的详细说明
  • SEO优化之新页面如何打开：究竟是新窗口还是原窗口？
  • 如何对网站内容进行分类？
    • SEO培训招生中
    166
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2022 SEOWHY 深圳市夫唯伙伴信息咨询有限公司