真心求教:百度蜘蛛为什么抓取根目录的文件地址,而不抓取我的伪静态地址 推荐热议 悬赏8元 已结束
<p><br></p><p><br></p><p><br></p><p>前提概要,这个是我的一个新站,在上线前就做好了伪静态地址的渲染,但是我看百度抓取的地址全部是我网站根目录下的文件地址,但是这个aspx后缀的文件地址其实是空的,但是每一条带参数的动态地址都有对应的伪静态的url,为什么蜘蛛总是抓取我的这些地址呢?(information.aspx对应的是news.html的伪静态地址)</p><p>问题1.每天都有在站长后台手动提交链接,sitemap更新,网站的sitemap.xml ,html文件也都有。</p><p>问题2.robots文件也屏蔽了这些地址,不知道为什么还是抓。</p><p>问题3.如何让百度正确的抓取我的伪静态地址。</p><p>网址www.hscw8.com ,源代码都是手写的应该没有什么问题,求大神真心赐教,不胜感激!</p><p><br></p>