搜外网>搜外问答>问答页面

百度蜘蛛抓取结尾带参数/*&%5E%25$

都是移动蜘蛛,不知道怎么回事,有相同情况的吗。

追加问题
    5 人参与回答

可能是百度的问题

百度蜘蛛抓取/*&%5E%25$和/*&^%$造成404错误,这种现在只能通过Robots.txt文件屏蔽后缀文件的方法解决。

转下码看看代表的是什么意思?然后判断来源

屏蔽蜘蛛爬取

黄勇
黄勇 · SEO需要的是结果,过程再完美也是没有价值的!

应该是后缀文件被转码了,可以尝试用Robots.txt文件屏蔽后缀文件

SEO培训招生中
189