搜外网>搜外问答>问答页面

蜘蛛一直抓取这样的首页链接 怎么整呢?

<p>请问 蜘蛛一直抓取这样的首页链接 怎么整呢?</p><p></p>

追加问题
    5 人参与回答
腾讯云总代理
腾讯云总代 · 医疗器械

动态页面会不断更新,所以会不断抓取,动态页面也不好优化,建议修改

你这是动态链接吧,链接发生改变,肯定会重新抓取啊

succeed
succe · 手机POS机注册,一部手机随时刷卡秒到账,费率0.26-0.52有积分,自选行业全积分,完全注册使用

通过Robots.txt文件禁止抓取试试,同时网站加个canonical标签试试

你这是动态链接吧,链接发生改变,肯定会重新抓取啊

qwoeyhoii333
qwoey · 奈斯导航为广大网民精心筛选、整理国内外各类优秀的网站大全,各位站长可以免费提交收录。==》

首先确定这链接是不是你网站内的,然后再查一下是否真的蜘蛛
https://didi.seowhy.com/ip.html

SEO培训招生中
189