网站蜘蛛爬取页面多数都是重复的怎么办？

污水处理设 · 专业一体化污水处理设备、溶气气浮机源头厂家！

设置Robots文件，同时也可以在抓取频次比较高的页面添加未抓取页面的链接入口，引导蜘蛛抓取

梅术

提交应该会好些吧

Ambit

引导蜘蛛抓取其他页面，发外链也好，主动推送也可以

周周丶 · 普洱茶源头厂家,专注普洱茶的生产,批发以及定制加工等.

做好内页的推送提交啊，不要只知道推送首页。多发内页的外链啥的，持续优化慢慢堆积，只能靠堆积啊兄弟

梦梦 · 泰海科技12年服务经验，专注于服务器租用

引导蜘蛛抓取其他页面，发外链也好，主动推送也可以

江南

做好推送提交，引蜘蛛，持续优化

宏星

做好推送提交，引蜘蛛

做好推送提交，持续优化

蜻蜓（bu · 各类便捷智能的在线图片处理工具

你控制不了蜘蛛的，只能持续优化

陈之虎 · 正在输入……

做好推送提交，持续优化

推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信：tuituiwaseo

1、对于新站前期可能只重复抓首页，内页不抓取，持续运营提升信任度；
2、蜘蛛不抓取的页面，可以抓取诊断无异常，做好推送提交，引蜘蛛（蜘蛛池、收录宝、推送给百度站长），有机会被抓取。

收录宝