搜外网>搜外问答>问答页面

制作sitemap出现2万个搜索结果、1万多用户登录链接，怎么屏蔽掉这些链接？

微信

我在制作sitemap时，用工具采集出来了2万个搜索结果的网址链接，还有1万多个用户登录的网址链接，各位知道是怎么回事吗？怎么屏蔽掉这些链接？

求大神指导

Site Sitemap

本帖由用户发布，如有侵权联系删除 2019-06-27 发布5,061 次浏览

举报

交换友情链接，就用搜外友链，方便！

5 人参与回答

最佳回答

用户22848

用户147926 等 1 人赞同该回答

Sitemap生成工具有过滤选项的，可以定规则过滤不生成

用户147807 ·

蜘蛛也抓取，郁闷死了。

用户128309 · ✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈✈㊣伸出发财的小手帮我点一下=。=

我也遇到这个问题，很多都是登录信息，蜘蛛也抓取，郁闷死了。

用户136240 · Google SEO，外贸企业的必备增长引擎，微信：15877068041

禁止蜘蛛抓取