搜外网>搜外问答>问答页面

如何避免网站重复URL被百度收录？悬赏3元已结束

微信

我的网站有一个栏目，每个详情页做了两版页面，分别是：

https://www.epanel.cn/tpl_detail/578.html[?]

https://www.epanel.cn/preview/578.html[?]

两版详情页的内容是一样的，如果我想优化百度对第一版页面的抓取和排名，该怎么做？

百度收录排名举报 本帖由用户发布，如有侵权联系删除 2020-04-22 发布1,270 次浏览

交换友情链接，就用搜外友链，方便！

11 人参与回答

亮健好 · 亮健好药网-网上买药的正规网站!药品网,药房网请选亮健医药网!

xxy徐、老星星、权重蜘蛛-池出租等 3 人赞同该回答

写Robots，使用disallow和通用符屏蔽一下

盛夏光年

乐逍遥、权重蜘蛛-池出租等 2 人赞同该回答

写一个Robots，禁止抓取第二个页面

天行健咨询 · 精益生产管理与六西格玛管理咨询，培训机构

权重蜘蛛-池出租等 1 人赞同该回答

重复URL做好301重定向到一个URL上

用Robots禁止蜘蛛抓取

动态链接会产生大量重复URL，尽量使用静属态链接或者伪静态

删除重复的页面，删除后需要向百度提交死链

杭州继保 · 微机保护行业

权重蜘蛛-池出租等 1 人赞同该回答

进来学习一下

氯化钠（殷

权重蜘蛛-池出租等 1 人赞同该回答

我也遇到了这个问题。我的方式是这样的，建立404，如果你还没有。用精确搜索看看百度对于两者的收录情况，如果都收录，或者第二个被收录，服务器端删除第二个，然后提交死链。如果第二个没被收录，直接服务器端delete。如果第二个被收录，第一个没被收录，提交死链之后引导蜘蛛爬你第一个页面。楼上说的robot.txt，是针对文明蜘蛛的做法，至于某些引擎的蜘蛛文明不文明，听话不听话，我还没有判断。