站长平台诊断网站蜘蛛抓取异常存在大量403错误,对网站有什么影响

站长平台诊断网站蜘蛛抓取异常存在大量403错误,对网站有什么影响?



追加问题
    2 人参与回答
程宇
程宇 · 在seo圈内,没有绝对的真理,只有亲身的实践,我是一名seo极客,我为自己代言。

这个问题,你用站长工具看的还不是很全,建议调取出空间里面的日志进行深度分析,403大的层面上来讲,是服务器这些文件拒绝访问,比较通常的情况表现在,访问的文件被设置了权限,需要打开权限,还有一种就是现在很多服务器的提供商之间的竞争,对一些IP设置禁止访问,比如百度有多个服务器,电信的网通的都会有,可能会出现的情况就是,在访问中有设计到ip限制,当然有时候是连通的可以访问,具体看过来的蜘蛛是在百度哪个ip下面的,就不进一步说了,这篇帖子,应该对你有帮助,建议按情况着一排查一下。

杨欣
杨欣 · 又叫小房子(网络昵称),微信:bdxiaofangzi;QQ:2233736929

看了你的网站,这个是设置的访问权限问题,你这样设置是对的。要不搜索引擎一旦可以爬抓这些403页面,可能会造成大量页面重复问题。
这种403页面对搜索引擎没有影响的,只是告诉搜索引擎没有权限,没有必要访问这个目录。
如果你网站存在大量这种链接,查看一下网站程序调用吧。估计是哪里的调用存在问题了。