我想将网站的垃圾内容用rotbots屏蔽,我记得百度学院说过-去掉垃圾内容可以用rotbots屏蔽掉即可。
但是我发现一个问题,用rotbots屏蔽的内容还是被收录了。
难道,百度自己说的也是屁话了????
确实会有这样的情况,有时就算写进Robots都会被收
要么写错,要么收录的是之前的额
是什么时候写的Robots 收录时间大概啥时候 是否是robots文件写错
检查Robots书写是否正确
估计是写错了,不然没理由会收录
看看rotots的定义吧
看看是不是自己Robots写错了吧,按理说应该不会被收录的
让更多人参与回答