9 人参与回答
用户144761 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo
用户225724 等 1 人赞同该回答

1、百度渲染蜘蛛会抓取css、JS这种; 

2、如果蜘蛛并非大量抓取这些文件,不屏蔽也没关系;

3、如需屏蔽这些文件,可用Robots文件,disallow 这些文件就好。

用户123076 · 唵嘛咪叭咪吽

Robots里面屏蔽掉就行
Disallow: /.JS$
Disallow: /
.css$
Disallow: /*.PHP$

用户179092 · 上海沈泉泵阀公司

禁止抓取就行了啊

用户166956 · 微机保护行业

Robots里面屏蔽掉就行

Robots里面屏蔽掉就行

用户4701 · 网站建设/仿站、美团点评运营、云服务器、DIY小程序、网站优化(SEO)、竞价托管(SEM)、网络推广。☛☞

如果你想屏蔽某些JS、css、PHP文件,或者不让搜索引擎蜘蛛抓取这些文件,可以通过使用Robots.txt文件:在网站根目录下创建一个名为robots.txt的文件,里面可以写入一些指令,告诉搜索引擎蜘蛛哪些文件或目录不允许访问。例如,如果你想禁止搜索引擎访问js、css、php文件,可以在robots.txt文件中添加以下指令:

User-agent: *
Disallow: /*.js$
Disallow: /*.css$
Disallow: /*.php$

用户118646 · 泰海科技12年服务经验,专注于服务器租用

写入Robots文件,就屏蔽蜘蛛抓取