搜外网>搜外问答>问答页面

生成了伪静态地址,但是蜘蛛却总是抓根目录文件的动态地址,如何修改 悬赏8元 已结束

<p>首先全站已经渲染了微动态的地址,但是我看网站日志抓取的全部是根目录下的动态地址,这些动态地址都是空的,但是每一个动态地址应该都有对应的伪静态地址,我应该如何告诉蜘蛛抓取我的伪静态地址呢?我在百度站长后台模拟抓取首页也可以正常的抓到伪静态的地址,不知道哪里有问题,希望大神给予指点。</p><p>附图。</p><p><br></p><p>百度蜘蛛抓取的页面</p><p><br></p><p>站长后台模拟抓取的首页地址,没什么问题</p>

追加问题
    3 人参与回答
谭云财
谭云财 · 专注于武汉seo优化诊断和全网营销!QQ:1252569006
权重蜘蛛-池出租 等 1 人赞同该回答

先检查一下网站下面的.htaccess配置规则,再看看网站的Robots.txt文件是不是需要调整。

这样可以在Robots文件里屏蔽根目录以及不想要的内容

SEO培训招生中
189