搜外网>搜外问答>问答页面

如何禁止蜘蛛爬类似的链接

/index.php?m=home&c=Lists&a=index&tid=2

/index.php?m=home&c=Tags&a=lists&tagid=40&lang=cn

/index.php?m=home&c=Tags&a=lists&tagid=51&lang=cn

/index.php?m=home&c=View&a=index&aid=99

不想让蜘蛛爬行这些文件 有没有大神指导下 

追加问题
    6 人参与回答

你这些都是动态页面,设置禁止访问就好了。

六千里
六千里 · 雅思、托福、Sat、GRE等出国留学语言培训。

是啊,你们倒是说如何写啊

Robots写下规则

要怎么写呢

爱你
爱你 · 个人擅长百度贴吧霸屏+百度文库外链+seo优化

root写规则禁止就可以啦

Robots写下规则