网站部分页面一直不收录,可以正常访问,但是百度抓取诊断一只显示异常,返回代码403 悬赏18元 已结束
<p>网站有个板块是筛选功能,做了伪静态一直不收录,已经一年多了,其他页面均收录正常,百度站长平台反馈抓取异常如下图,谁知道如何解决,例:<a href="http://www.goupu.com.cn/dog/s-4-0-0-0-1-0-0.html" target="_blank" data-url="www.goupu.com.cn" class="show-5118-data" rel="nofollow">http://www点goupu点com.cn/dog/s-4-0-0-0-1-0-0.html</a></p><p><br></p>
6 人参与回答
我也遇到了同样的问题,可以问一下你是怎么解决的吗?
简单看了下,有可能是下面这些原因(只供参考):
1、你的服务器是否稳定,如果服务器比较卡或者不稳定,会直接影响蜘蛛抓取,蜘蛛不能很好的去抓取页面或由于加载慢只抓取到网页一半,这就很大程度上影响了网站的收录。
2、你的网站页面蜘蛛爬行了,但未收录。当你的页面长时间都不被百度收录的话,那么就要适当的给该页面增加一些附加价值或者对该页面进行重新的进行修改。你可以在网站内容里新增一些图片,视频或者内容,也可以对标题进行再次编辑。总之,要让Baiduspider再次过来爬行的时候,返回的状态码不是一个无变化的状态,这样你的页面被收录的几率就大大的提升了。
3、查Robots设置,看是否主动屏蔽蜘蛛Robots的设置。
4、页面是否存在敏感词汇。
5、页面内容是否存在采集内容。还有就是质量很低的内容。这些都会影响到。