网站蜘蛛日志很奇怪 悬赏8元 已结束
网站最近收录和关键词都在掉，去看了蜘蛛日志，看完后一脸懵逼
首先，状态码基本是301
其次，日志看到蜘蛛没到过html页面，大多都抓图片
13 人参与回答
建议用金花工具看看，可以删除假蜘蛛，比较方便
<p></p><p><br></p><p><br><br>不奇怪，事实就是如此~</p>
我的来的全部是假蜘蛛，我怀疑是不是被采集了，难受
和我的情况一样 我也不知道怎么处理 只会爬图片 HTML页面基本只爬首页
吧https 去掉吧
<p><br></p><p>HTTPS://301的状态不完全，抓取都超时了。如没必要，取消301吧。</p>
我还想知道俄罗斯蜘蛛是什么鬼
