搜外网>搜外问答>问答页面

如何屏蔽js、css、php文件,或者不让蜘蛛抓取这些文件? 悬赏1元 已结束

如何屏蔽js、css、php等其他文件,或者不让蜘蛛抓取这些文件,该怎么设置,有没必要这样设置

追加问题
    9 人参与回答
推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo
刘上仙 等 1 人赞同该回答

1、百度渲染蜘蛛会抓取css、JS这种; 

2、如果蜘蛛并非大量抓取这些文件,不屏蔽也没关系;

3、如需屏蔽这些文件,可用Robots文件,disallow 这些文件就好。

丫丫
丫丫 · 唵嘛咪叭咪吽

Robots里面屏蔽掉就行
Disallow: /.JS$
Disallow: /
.css$
Disallow: /*.PHP$

胡汉三
胡汉三 · 上海沈泉泵阀公司

禁止抓取就行了啊

杭州继保
杭州继保 · 微机保护行业

Robots里面屏蔽掉就行

Robots里面屏蔽掉就行

武荣网络
武荣网络 · 网站建设/仿站、美团点评运营、云服务器、DIY小程序、网站优化(SEO)、竞价托管(SEM)、网络推广。☛☞

如果你想屏蔽某些JS、css、PHP文件,或者不让搜索引擎蜘蛛抓取这些文件,可以通过使用Robots.txt文件:在网站根目录下创建一个名为robots.txt的文件,里面可以写入一些指令,告诉搜索引擎蜘蛛哪些文件或目录不允许访问。例如,如果你想禁止搜索引擎访问js、css、php文件,可以在robots.txt文件中添加以下指令:

User-agent: *
Disallow: /*.js$
Disallow: /*.css$
Disallow: /*.php$

梦梦
梦梦 · 泰海科技12年服务经验,专注于服务器租用

写入Robots文件,就屏蔽蜘蛛抓取

SEO培训招生中
189