蜘蛛不来来爬取页面怎么引导?
网站不来蜘蛛抓取了,没有蜘蛛爬取页面,更新的也没有被收录,怎么引导蜘蛛来网站抓取页面,怎么更好的引导蜘蛛让抓取页面?为什么会不被抓取,怎么检查网站有没有问题?
8 人参与回答
技巧一、合理稳定的提升网站基础权重
权重高的蜘蛛抓取的就频繁,权重低的,蜘蛛爬取的速率也比较低。要想让蜘蛛多抓取就要想法提升网站的权重,而新站权重达到1是很容易的,只要网站质量过关、手法正规,达到权重1是非常快的,至于从1到2就要慢很多。不过,对于SEO站长来说,这一点也是足够的。
技巧二、网站内容更新频率周期合理
蜘蛛对于更新频率高的网站总是格外的喜欢,因为每天都会来抓取,如果你的更新频率降低了,时间长了,蜘蛛也会变懒惰。当然,如果你能每天固定点的更新就更好了,通过日志分析你会发现蜘蛛这个点会来很多次。当然,如果你不知道蜘蛛什么时候来抓取,担心自己的更新没有效果,建议可以通过日志分析来获取蜘蛛的爬行规律,这样更便于蜘蛛抓取收录页面。当然,蜘蛛每次爬行抓取的页面都会存在数据库中,下次爬取的时候它会对之前的数据进行对比,如果没有更新,蜘蛛就会 减少抓取的频率,甚至是不抓取。时间长了,蜘蛛就会不再光顾你的网站。如果你的网站之前更新频率很低,现在想要提升收录,让蜘蛛抓取的更多,建议在固定更新频率的基础上,到一些网站去发一些文章带链接,这样可以将蜘蛛引到你的网站中,增加抓取几率。