百度蜘蛛每天几千个页面抓走,但合集只放出30个页面怎么破
看服务器日志,百度蜘蛛每天出动十多个IP地址,几千个页面抓走,代码基本是200表示成功抓走。查过nslookup是真的百度蜘蛛。但这样持续了一个月,合计抓走一万多个页面,目前只放出来30多个页面,也没有排名,我的是新站,才建立两个月。
看服务器日志,百度蜘蛛每天出动十多个IP地址,几千个页面抓走,代码基本是200表示成功抓走。查过nslookup是真的百度蜘蛛。但这样持续了一个月,合计抓走一万多个页面,目前只放出来30多个页面,也没有排名,我的是新站,才建立两个月。