搜外网>搜外问答>问答页面

蜘蛛经常爬取重复页面需要处理吗

微信
追加问题
举报 本帖由用户发布，如有侵权联系删除  2020-09-24 发布646 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    10 人参与回答
鱼山哥哥
鱼山哥哥 · 娇果网-娇果整形网-知名的三方咨询服务平台

不需要的，让它慢慢爬

4 年前
IP属地：四川
赞同 0 评论 0
收藏 举报
评论取消
『義魦亮』
『義魦亮』

没收录就不用管吧 当然你也可以做成silian

4 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
向上吧快乐的人
向上吧快乐

你这个页面是收录的还是没有收录的呢 不用管他让他爬 

4 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消
迷％离
迷％离 · 网站客服系统、在线聊天软件、智能客服系统

可以把没有爬取的页面添加这个页面中啊

4 年前
IP属地：北京
赞同 0 评论 0
收藏 举报
评论取消
搜外用户
搜外用户 · 来搜外学习的一名普通用户

不用管，可以禁止爬

4 年前
IP属地：北京
赞同 0 评论 0
收藏 举报
评论取消
西接拉阿木丿
西接拉阿木 · 那木西撇，色拉恩子，做一个佛系SEO，谢谢大佬来互点刷点访问量，有点必回

不用管，希望蜘蛛多来爬爬

4 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
淋淋的脸
淋淋的脸

这个不用管的

4 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
知世
知世 · seo优化推广

可以禁止爬

4 年前
IP属地：江西
赞同 0 评论 0
收藏 举报
评论取消
小熊饼干?
小熊饼干? · 777股票平台http://www. 7778877. com

是不是你网站内的锚链接都指向了相同的几个页面，要不改改锚链接，没办法减少爬，可以禁止爬，用Robots.txt文件禁止。

4 年前
IP属地：安徽
赞同 0 评论 0
收藏 举报
评论取消
搜外微信
提供服务
常用链接
产品实验室
©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司