看到百度只抓取老页面,不爬新页面是怎么回事呢!www.592bb.com
可以使用蜘蛛池提升抓取频次
1、抓取老页面,抓取返回码是否是错误码,抓取了百度站长里面有抓取异常吗,如果没有,多半虚假蜘蛛,如果有,已收录死链,做死链提交删除新的URL推送; 2、如老域名建站,可能存在这种抓以前URL情况,但是经过持续优化提升,这种后期会抓取正常。
让更多人参与回答