求方法,完全屏蔽网站的某个JS不被蜘蛛下载抓取

1,813 次浏览

如题:求方法,完全屏蔽网站的某个JS不被蜘蛛下载抓取

追加问题
分享到微信 收藏
    2 人参与回答
刘志仕
刘志仕 · SEOWHY版主,擅长:SEO、网站运营、微信/手机网站开发。微信:673672871

User-agent: *
Disallow: /xx/xxx.JS

Robots.txt文件中,使用类似这样的代码可以做到,/xx/xxx.js就是你要屏蔽的JS文件路径。

三木
三木 · 八年网络营销经验,微信公众号:三木谈

反正就我知道的,Robots是不太好使,添加进去蜘蛛照样抓取。