网站蜘蛛爬取页面是正常的，但是有时候爬取页面都是死链接这样是无效的，还有爬取页面的链接重复太高，爬取有的没有爬取痕迹，这个怎么解决蜘蛛的问题？感谢解答疑问。
提交一下死链吧
对于解决网站抓取异常的问题，我们能从网站返回HTTP状态码入手。而网站抓取异常的原因总结下来就是服务器和域名的问题，为了避免网站抓取异常，对服务器的挑选大家一定要慎重，千万别贪图便宜。要知道网站抓取异常对网站的影响是很大的，如果网站上存在大量内容是蜘蛛无法正常抓取的，搜索引擎对网站的信任和评价就会下降，而且网站抓取出问题，很明显的索引和权重等方面都会受到一定程度的负面影响，为了避免有更严重的情况，大家要尽快的解决。
让更多人参与回答
