搜外网>搜外问答>问答页面

蜘蛛爬取页面多数重复怎么办？

微信

网站最近有点不正常，查看日志发现蜘蛛爬取页面很多，可是很多次数都是爬取重复的页面，这样的爬取也没有用，怎么引导蜘蛛正确的爬取方法，让蜘蛛爬取页面正常？

追加问题
举报 本帖由用户发布，如有侵权联系删除  2022-07-15 发布333 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    6 人参与回答
江南
江南

多抓不会有影响的

1 年前
IP属地：江西
赞同 0 评论 0
收藏 举报
评论取消
痫来无事
痫来无事

多抓没影响 放心

1 年前
IP属地：山西
赞同 0 评论 0
收藏 举报
评论取消
宏星
宏星

又没影响，不用管

1 年前
IP属地：江西
赞同 0 评论 0
收藏 举报
评论取消
工业静电控制
工业静电控 · 静电监控系统-静电消除设备-无尘净化产品-电话：4008-863-862

说明你的网站没什么新东西

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
Sunflower-
Sunfl

没影响的，蜘蛛重复抓可能是把内容放进数据里了

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
微笑
微笑

这不好吗，蜘蛛重复抓可能是把内容放进数据里了，多抓是没影响的

1 年前
IP属地：安徽
赞同 0 评论 0
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
  • 有没有每天更新很多文章的seoer
  • 宝塔的操作记录可以修改的嘛
  • 我的网站哪里需要改进呢？提点意见
  • 网站优化中哪些页面需要添加nofollow标签？
  • www的和没有 www的网站交换友链，有影响吗
  • 域名注册长短对网站重要吗？
  • 火车头采集文章怎么使用采集？
  • 这种情况改咋办啊，好几个站都是被劫持快照，打开是正常的内容
  • 关键词密度太高是怎么控制密度最佳？
  • 百度快照不更新怎么解决快照？
    • SEO培训招生中
    189
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司