搜外网>搜外问答>问答页面

robots写屏蔽页面被提交会收录不

用的WP程序,

robots写法,我屏蔽了NNN多多多页面,留存首页 分类 内容,TAG标签很少用上,就不管了。

问题是,内容页左侧有个点击去评论导航,自动滚动 下方评论区后

原网址   .html  后缀会变成 .html#comments

虽然robots屏蔽了#comments,但是我用了百度自动提交JS代码,.html#comments这个页面如果被刷新就会提交一次,

会被抓取收录····,

想改善,那我删除这个评论导航,可是美观影响,强迫症控,

想改善,那我还只能用地图提交和手动提交,

.

百度推送JS用户访问自动提交,很好东西,要是我那些页面不被收录,用户访问就会自动提交一次,多好阿,有点舍不得阿。


追加问题
    2 人参与回答

说了这么多,没怎么看懂!

Robots生效的时间以前一个月,不知道现在的时间是多少,就是说新站提交robots一个之内百度会无视,会抓取。一个月之后才会遵守这个协议。

希望这一点对你有帮助。