如何使用robots屏蔽垃圾外链

3,543 次浏览

发现网站有许久之前竞争对手挂的恶意外链,比如在博客大批大批的刷网站的一个死链接,还有在一些问题严重的网站,甚至yellow网站挂的都有,我查的时候给我吓了一跳,赶紧把浏览器给关了.....

追加问题
    2 人参与回答
学习交流
学习交流 · 做seo两年时间,从事做医疗,和装修行业。

Robots是不能屏蔽外链的,这个文件是告诉蜘蛛网站哪些东西可以抓取,哪些文件不能抓取。

缔惠
缔惠 · seo,网站建设

Robots是屏蔽你自己的网站一些内容不想被抓取的