<p>如只允许百度蜘蛛,禁止其他一切蜘蛛,这两种写法哪种是正确的呢?</p><p>1、先允许后禁止</p><p><br></p><p>2、先禁止后允许</p><p><br></p><p>这两个哪种写法是正确的呢?还是都一样呢?</p>
禁止所有的蜘蛛你做网站干什么用
1、如果是单纯的禁止其他蜘蛛,其他蜘蛛都是有具体的名字的; 2、User-agent: Googlebot Disallow: / User-agent: Googlebot-Mobile Disallow: / User-agent: Googlebot-Image Disallow:/ User-agent: Sogou spider Disallow: /
@推推蛙 蛙总
让更多人参与回答