3 人参与回答
小甜甜
小甜甜 · 网站程序全套开发

来学习下

我分析一下自己网站的日志,发现了这几个ip段

220 . 181 . 108 . *

123 . 125 . 71 . * 

111 . 206 . 108 . *

111 . 206 . 198 . *

111 . 206 . 221 . * 

前两个是抓取页面的,后面三个专门抓图片、css、JS这些东西

很多地方说220那个是高权重蜘蛛,123那个是高权重蜘蛛,我不知道是不是真的,这个你自己查证一下。

祖传优化
祖传优化 · 从业互联网8年:SEO/SEM/媒体广告,免费咨询合作【微信:13959853105】

IP段????蜘蛛还有IP段?没听说