搜外网>搜外问答>问答页面

求大神解答萌新疑惑 悬赏8元 已结束

<p></p><p>如图</p><p>为什么百度蜘蛛 每次抓取都要先抓PHP文件  然后才是真实的地址?而其他蜘蛛正常。这样算不算正常?感觉会浪费蜘蛛资源?</p><p>网址做了伪静态 ,也生成了静态文件</p><p>怎么才能让蜘蛛直接抓取真实的地址?</p>

追加问题
    15 人参与回答
seoer
seoer · seo站群
吉祥如意 等 1 人赞同该回答

要先以合理的结构和内容引来真蜘蛛

推推蛙
推推蛙 · 擅长SEOSEM网站诊断、方案编写、优化运维。微信:tuituiwaseo
吉祥如意 等 1 人赞同该回答

1、如果你的这些PHP文件并未在前端URL里有布局,一般情况下,无留通道,无做推送,真实蜘蛛是无法抓取爬行到这些URL,也不会放出页面收录; 

2、这些php文件是否被收录,无收录那么无太大影响,蜘蛛有真假之分,如果确认无留通道无推送,那么是不会被抓取和收录; 

3、要想蜘蛛去抓取爬行真是页面URL,做好基础站内外SEO优化,提升域名信任度,做好推送提交,做好引蜘蛛操作。

ps:百度站长抓取频次及蜘蛛日志可参考,日志里也存在模拟蜘蛛非真蜘蛛抓取爬行,即使是真蜘蛛抓取php页面,只要没放出收录影响不大,确信无动态URL,可动态地址屏蔽,一般不建议这样做。

只要不会收录就无需担心,能爬也不错

AK
AK · 权4网站锚文本链接找我

看这个URL没问题的啊 不影响的

慕容千秋吖
慕容千秋吖 · 拉卡拉POS机办理 →→→

实在不行屏蔽一下

额....我也来看看。实在不行屏蔽一下..

十六夜
十六夜 · 气象站-气象监测传感器-农业观测站设备-全自动气象站

这个一般没啥问题吧

可以屏蔽掉这类型的链接,避免重复抓取

可以屏蔽掉这类型的链接,避免重复抓取

污水处理设备
污水处理设 · 专业一体化污水处理设备、溶气气浮机源头厂家!

这个还真不太清楚了

进来看看大佬如何回复,学习一下

格栏特铝合金脚手架
格栏特铝合 · 广州格栏特是一个铝合金脚手架的出租售卖的公司,量大从优!需要的联系138-2600-2184微信同步

看看大佬怎么回答

海螺
海螺 · 债易收专业债务催收,提供收债-要债-讨账服务18057453353

这个专业的我就只能看看不说话了

这不算浪费蜘蛛资源,抓取没有问题,假的蜘蛛就忽略

SEO培训招生中
173