robots屏蔽的内容,为什么百度依然还是收录,展示?
我想将网站的垃圾内容用rotbots屏蔽,我记得百度学院说过-去掉垃圾内容可以用rotbots屏蔽掉即可。
但是我发现一个问题,用rotbots屏蔽的内容还是被收录了。
难道,百度自己说的也是屁话了????
7 人参与回答
我的微信:sec_vip 等 1 人赞同该回答
确实会有这样的情况,有时就算写进Robots都会被收
我的微信:sec_vip 等 1 人赞同该回答
要么写错,要么收录的是之前的额
我的微信:sec_vip 等 1 人赞同该回答
是什么时候写的Robots 收录时间大概啥时候 是否是robots文件写错
我的微信:sec_vip 等 1 人赞同该回答
检查Robots书写是否正确
我的微信:sec_vip 等 1 人赞同该回答
估计是写错了,不然没理由会收录
我的微信:sec_vip 等 1 人赞同该回答
看看rotots的定义吧
我的微信:sec_vip 等 1 人赞同该回答
看看是不是自己Robots写错了吧,按理说应该不会被收录的