怎么屏蔽谷歌蜘蛛？
我的网站一直再给谷歌爬蜘蛛，我又不要谷歌
一直爬爬到我服务器都要死的感觉
User-Agent: *
Disallow: /
Allow: /$
Allow: /complain/
Allow: /media_partners/
Allow: /about/
Allow: /user_agreement/
这个是robots.txt 屏蔽谷歌的规则吗？
我怕屏蔽百度 360 搜狗 的
我的网站一直再给谷歌爬蜘蛛，我又不要谷歌
一直爬爬到我服务器都要死的感觉
User-Agent: *
Disallow: /
Allow: /$
Allow: /complain/
Allow: /media_partners/
Allow: /about/
Allow: /user_agreement/
这个是robots.txt 屏蔽谷歌的规则吗？
我怕屏蔽百度 360 搜狗 的
