搜外网>搜外问答>问答页面

大佬帮忙看看，网站的robots文件，是不是有错误？

微信

如题，总感觉网站robots文件抒写不对

www.lanjingcs.com

Robots 举报 本帖由用户发布，如有侵权联系删除 2022-03-28 发布479 次浏览

4 人参与回答

素材网 · 素材网，网站模板，网站素材，视频教程，sucaipro。com

会不会出问题了？还是刚好是热点或者写的这部分内容刚好缺失？？？还是被攻击了？

陈之虎 · 正在输入……

没啥问题，放心

推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信：tuituiwaseo

1、Robots文件有无，对优化无太大影响；

2、robots文件，主要是为了告知蜘蛛不去抓取哪些栏目、文件，disallow禁止蜘蛛抓取爬行；

3、你的文件都是允许，无问题，后期有需要disallow哪些页面不被蜘蛛抓取可添加。

ps：有在线robots生成工具，站长工具哪里就有可以看看，如果没有要刻意去封禁的栏目可不封禁

收录宝