搜外网>搜外问答>问答页面

网址搜索引擎蜘蛛不断爬取反复网页页面多次怎么解决？

微信

网址搜索引擎蜘蛛不断爬取反复网页页面多次怎么解决？
追加问题
索引
本帖由用户发布，如有侵权联系删除  2022-04-25 发布764 次浏览
举报
其他问题
 
    8 人参与回答
拉卡拉
用户205885

是不是网站的链接结构不合理

3 年前
IP属地：四川
赞同 0 评论 0
收藏 举报
评论取消
重庆联合教育
用户181510 · 重庆联合教育为广大学员提供自考、成教、网络教育等学历提升服务。

url规划好没的

3 年前
IP属地：重庆
赞同 0 评论 0
收藏 举报
评论取消
plank
用户123528 · 上海力东科技有限公司是一家致力于各类生化试剂、标准品、小分子抑制剂、液体试剂等相关产品的研发与销售的企业。

试试加Sitemap文件

3 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消
污水处理设备
用户202556 · 专业一体化污水处理设备、溶气气浮机源头厂家！

Nofollow，可能是陷入了蜘蛛陷阱，调整一下内链的模块和抓取入口

3 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
A方向
用户74552

可以尝试将蜘蛛引导到其他页面上试一试。

3 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消
流浪的战狼
用户110655 · 电量变送器|电能质量分析仪|综合安规测试仪|功率分析仪|万用表

不会是是陷入死循环了吧

3 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消
陈之虎
用户173017 · 正在输入……

是不是网站的链接结构不合理？

3 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
习惯沉默
用户148171 · 浙达精益，专注致力于磁致伸缩位移传感器

可以制作面包屑导航，来尝试解决

3 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消

收录宝

nmixi nmixi nmixi nmixi nmixi 20sfp 20sfp 20sfp 20sfp 20sfp 20sfp 20sfp 20sfp 20sfp 015hs 015hs 015hs 015hs 015hs 015hs

蜘蛛池

搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司