搜外网>搜外问答>问答页面

各位大佬帮看下日志分析出来的这种类似伪百度蜘蛛ip到底是什么

<p>各位大佬帮看下日志分析出来的这种类似伪百度蜘蛛ip到底是什么,每个小时都来8,9次类似的ip,访问首页和robots文件,如果我robots设置他禁止爬取可以如图2这样设置嘛</p><p></p>

追加问题
    1 人参与回答
简单收录网
简单收录网 · 来提交你的网站,免费做高权重免费外链
£小黎明 等 1 人赞同该回答

看着这蜘蛛不正经,咋回事呢

SEO培训招生中
189