网站日志一行出现三个不同的网址，蜘蛛抓取的到底是哪一个 悬赏5元 已结束
<p>看下图网站日志中，一行出现了三个url:</p><p>/qr/api.php?</p><p>m.****.top/article/7520.html</p><p>www.****.top/article/7520.html</p><p>蜘蛛到底抓取的是哪一个页面。</p><p></p>
15 人参与回答
最佳回答
后面带200 的，因为200是正常访问的
返回码是200的是顺利抓取的页面
看你怎么匹配没做301都抓取的
不太清楚 过来学习学习
推推蛙回复的很详细了。
抓取到带返回码那个。
带返回码那个 200 334
