百度蜘蛛抓取页面有问题怎么办?
百度蜘蛛有时候来网站,有时候不来了,来去不正常的蜘蛛,爬取也没有数据增加,总是觉得不是真实的蜘蛛呢?为什么蜘蛛爬取不正常,有什么好的吸引蜘蛛的办法,把蜘蛛吸引过来怎么引蜘蛛来网站?用什么工具可以查询到准确的?
9 人参与回答
通过日志仔细分析一下。
有些网站的页面蜘蛛是不会去爬取的,可能是网站加载太慢了
花钱 就有 但是不靠谱的也很多
百度蜘蛛有时候来网站,有时候不来了,来去不正常的蜘蛛,爬取也没有数据增加,总是觉得不是真实的蜘蛛呢?为什么蜘蛛爬取不正常,有什么好的吸引蜘蛛的办法,把蜘蛛吸引过来怎么引蜘蛛来网站?用什么工具可以查询到准确的?
通过日志仔细分析一下。
有些网站的页面蜘蛛是不会去爬取的,可能是网站加载太慢了
花钱 就有 但是不靠谱的也很多