10266 次浏览

用户4255

自主创业运营两个综合垂直网站 物友网和爱富网。

2014-01-21 加入搜外
上海市 现居
1 回答
0 赞同
1700 浏览

百度只抓取旧信息怎么破? 抓取频次 B2B

B2B网站,百度每天100多万的抓取频次,但是只抓商铺页的公司介绍、联系方式等目录页。即便产品内容页抓取,也是抓取旧信息比如去年中旬的信息。每天新发的产品内容信息却是零星抓取,这个怎么破呀!要是能把100多万的抓取频次都用到抓取每天新发的新……

3773 浏览

百度蜘蛛大量抓取列表分页怎么办? 推荐热议 Site B2B

<p>如下图,我是B2B网站,百度每天大量抓取用户商铺信息列表分页,带宽加到10M了都一样跑满。有抓取是好事,但site当天新收录的信息又寥寥无几。这个怎么破,要root分页抓取吗?求高手解答!</p><p&g……