<p>每天来一下，就抓下主页，抓几下robots，就收录了主页，内页没收，每天就对着robots一顿抓，是协议写的有问</p><p>题吗，大佬帮忙给看看</p>
我的也开始了服了
这不是真的蜘蛛啊，IP都不对
新站都这样，习惯就好
假蜘蛛，鉴定完毕
让更多人参与回答
