搜外网>搜外问答>问答页面

Robots.txt这个文件这样弄对吗,因为没有nofollow源码后台

robots.txt generated at http://tool.chinaz.com/robots/

User-agent: *
Disallow: User-agent: *
Disallow: /bin/cgi/http://www.sjqxmpinbaoche.com/gywm
Disallow: /bin/cgi/http://www.sjqxmpinbaoche.com/lxwm
Disallow: /bin/cgi/http://www.beian.miit.gov.cn/
Disallow:/foo.htmlhttp://www.beian.gov.cn/portal/registerSystemInfo?recordcode=35058102000203
追加问题
    4 人参与回答
kitwei503463 等 1 人赞同该回答

可以的

武荣网络
武荣网络 · 网站建设/仿站、美团点评运营、云服务器、DIY小程序、网站优化(SEO)、竞价托管(SEM)、网络推广。☛☞

Robots.txt generated at https://www、0595wr、cn/ 

User-agent: *

Disallow: /禁止搜索引擎抓取的目录名称1/

Disallow: /禁止搜索引擎抓取的目录名称2/

Disallow: /后台目录名称/

Disallow: /插件目录名称/

给你看看我的


User-agent: *
Allow: /

简洁明了