robots写屏蔽页面被提交会收录不
用的WP程序,
robots写法,我屏蔽了NNN多多多页面,留存首页 分类 内容,TAG标签很少用上,就不管了。
问题是,内容页左侧有个点击去评论导航,自动滚动 下方评论区后
原网址 .html 后缀会变成 .html#comments
虽然robots屏蔽了#comments,但是我用了百度自动提交JS代码,.html#comments这个页面如果被刷新就会提交一次,
会被抓取收录····,
想改善,那我删除这个评论导航,可是美观影响,强迫症控,
想改善,那我还只能用地图提交和手动提交,
.
百度推送JS用户访问自动提交,很好东西,要是我那些页面不被收录,用户访问就会自动提交一次,多好阿,有点舍不得阿。