检查日志发现百度蜘蛛抓取不少网站不存在的栏目和页面 悬赏1元 已结束
<p>分析网站日志,发现有不少404状态码,发现是百度蜘蛛抓取了不少网站不存在的栏目和页面,很奇怪网站都不存在,怎么抓取的呢。</p><p></p><p>就是不少类似这种的,网站是老网站了,请大神分析下这是什么情况<br></p>
10 人参与回答
<p>分析网站日志,发现有不少404状态码,发现是百度蜘蛛抓取了不少网站不存在的栏目和页面,很奇怪网站都不存在,怎么抓取的呢。</p><p></p><p>就是不少类似这种的,网站是老网站了,请大神分析下这是什么情况<br></p>