搜外网>搜外问答>问答页面

百度蜘蛛抓取页面没有记录咋回事?

明明是蜘蛛每天过来访问与抓取页面了,但是页面内容没有被百度收录,也没有抓取记录,难道都是假蜘蛛吗?一次次抓取页面没有任何记录,我们怎么做呢?如何吸引蜘蛛抓取页面更多,看看哪里问题导致抓取后没有记录?

追加问题
    6 人参与回答

网站的日志,可以看到

网站的日志,可以看到

可以查看一下网站的日志

天行健咨询
天行健咨询 · 精益生产管理与六西格玛管理咨询,培训机构

可能是日志功能不全,有些服务商为了减轻服务器压力,就对网站日志做了功能上的限制,比如说只保留最近的100条记录,那之前的数据就看不到了。原因之二是不会分析,比如没有发现或者漏掉等。

梦梦
梦梦 · 泰海科技12年服务经验,专注于服务器租用

下载网站日志,确定是不是抓取了这个页面

蜘蛛日志可以详细看到抓取你那个页面的