一个URL被百度判定为404页面,后来这个页面变成可访问有质量的页面,这页面是否还会被收录?
举例:文章页面URL:
开始: http://www.****.com/10000/
结束:http://www.****.com/30000/
这20000个页面由于某种原因,被蜘蛛爬取,返回404.(网站当然做了404页面了)。
后期,网站文章更新到了http://www.****.com/10000/ ,也就是现在http://www.****.com/10000/到http://www.****.com/30000/已经有实质性的内容了,已经返回200.
那么以前蜘蛛爬取的是404,那现在是200,那这些页面还会被收录吗?
----------------------------------------
当蜘蛛判断这个页面是404后,那蜘蛛还会来爬取这个404页面吗?
2 人参与回答