关于robots的骚操作带来一个血的教训!
前几日发现很多国外的垃圾蜘蛛,还有bing msn等等这些蜘蛛来我网站特别的多,所以就想着把垃圾蜘蛛给屏蔽掉,
User-agent:Ahrefsbot
Disallow: /
但他娘的一时不慎,把这行复制在了robots文件的最后面,放上去后忘记跟踪检查,直到无收录、降权,才发现这样写是屏蔽了所有网站的蜘蛛!欲哭无泪,只能怪自己太无知,太粗心
顺便求问大神,该如何才能尽快的恢复。
前几日发现很多国外的垃圾蜘蛛,还有bing msn等等这些蜘蛛来我网站特别的多,所以就想着把垃圾蜘蛛给屏蔽掉,
User-agent:Ahrefsbot
Disallow: /
但他娘的一时不慎,把这行复制在了robots文件的最后面,放上去后忘记跟踪检查,直到无收录、降权,才发现这样写是屏蔽了所有网站的蜘蛛!欲哭无泪,只能怪自己太无知,太粗心
顺便求问大神,该如何才能尽快的恢复。