SEO
聚集100万网络营销实战家
建网站
换友链
蜘蛛每天都抓取js和css文件,需不需要用robots协议屏蔽? - 搜外SEO问答
搜外网
>
搜外问答
>
问答页面
蜘蛛每天都抓取js和css文件,需不需要用robots协议屏蔽?
微信
查看网站日志发现蜘蛛每天都抓取js和css文件,需不需要使用robots屏蔽掉啊?
追加问题
交换友情链接,就用搜外友链,方便!
1 人参与回答
常楽
·
擅长企业网站优化,帮助企业网站推广与营销,qq932819102
你的
JS
和css会被搜
索引
擎所收录吗?建议你好好学习一下
Robots
的详细说明
相关问题
复制内容如何让搜索引擎快速收录呢?
(0 个回答)
网站大量IP同时访问导致网站打不开,有好的解决办法吗
(2 个回答)
看了下网站日志,百度老去抓取404页面,需要在robots文件里面屏蔽吗?
(3 个回答)
关于网站只收录新闻栏目页问题及robots屏蔽后台问题
(7 个回答)
各大搜索引擎蜘蛛都指着网站的登录后台目录和系统文件目录抓取
(3 个回答)
看了下网站日志,百度老去抓取404页面,需要在robots文件里面屏蔽吗?
(1 个回答)
url被删除返回404后还用robots屏蔽吗?
(2 个回答)
网站被不良网站镜像了,封禁IP,加JS都不管用,有没有好的解决办法。
(8 个回答)
收录宝
ws/tu
s/zha
ews/z
ews/k
×
悬赏问题
让更多人参与回答
给问题设置一定金额,将更容易获得关注与回答。
1元
路过一下
3元
意思一下
5元
了解一下
8元
支持一下
18元
有钱任性
88元
我是土豪
选择支付方式
微信支付
支付宝
余额支付
确认支付 →
×
追问
追问