百度爬虫是如何爬取网站的？
想了解下百度的爬虫爬取网站，比如没提交过sitemap和内容链接，百度对网站www.kkzhaofang.com后是如何到达下面的栏目或者二级域名爬取？
1 人参与回答
从首页 顺着首页的链接进入下一页
想了解下百度的爬虫爬取网站，比如没提交过sitemap和内容链接，百度对网站www.kkzhaofang.com后是如何到达下面的栏目或者二级域名爬取？
从首页 顺着首页的链接进入下一页
