搜外网>搜外问答>问答页面

蜘蛛反复抓取同一篇文章是什么意思?

<p>网站上的文章很多,但是看log发现蜘蛛一天<b>不同的ip</b> <b>不同的时间</b>反复去抓取同一篇<b>已经收录的文章</b>,这是啥意思?</p><p>这篇文章从结构 位置 内容啥的和其他没有收录的文章无不同之处 我只是想不明白为啥?<a href="http://brand.rechaonet.com/news/news_list.php" data-url="brand.rechaonet.com" class="show-5118-data" rel="nofollow" target="_blank">名片</a></p><p><br></p><p><br></p>

追加问题
    4 人参与回答

从这篇文章进去的

战略规划
战略规划 · 专业的战略咨询顾问

爬虫的入口吧

QC
QC · →→→→→→→→→→→→→京东购物关注优惠,就上专业京东优惠券领取平台:京东券搜搜→→

爬虫的入口吧

只是去抓这篇文章没有抓其他的文章吗