网站蜘蛛爬取页面多数都是重复的怎么办？

用户202556 · 专业一体化污水处理设备、溶气气浮机源头厂家！

设置Robots文件，同时也可以在抓取频次比较高的页面添加未抓取页面的链接入口，引导蜘蛛抓取

用户202844

提交应该会好些吧

用户186250

引导蜘蛛抓取其他页面，发外链也好，主动推送也可以

用户214526 · 普洱茶源头厂家,专注普洱茶的生产,批发以及定制加工等.

做好内页的推送提交啊，不要只知道推送首页。多发内页的外链啥的，持续优化慢慢堆积，只能靠堆积啊兄弟

用户118646 · 泰海科技12年服务经验，专注于服务器租用

引导蜘蛛抓取其他页面，发外链也好，主动推送也可以

用户197320

做好推送提交，引蜘蛛，持续优化

用户215638

做好推送提交，引蜘蛛

用户205883

做好推送提交，持续优化

用户193094 · 各类便捷智能的在线图片处理工具

你控制不了蜘蛛的，只能持续优化

用户173017 · 正在输入……

做好推送提交，持续优化

用户144761 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信：tuituiwaseo

1、对于新站前期可能只重复抓首页，内页不抓取，持续运营提升信任度；
2、蜘蛛不抓取的页面，可以抓取诊断无异常，做好推送提交，引蜘蛛（蜘蛛池、收录宝、推送给百度站长），有机会被抓取。