网页的大小和搜索引擎引擎蜘蛛抓取有着怎样的关系? 谁知道请告诉下
小的话爬取就快点
网站的加载速度与很多有关系,代码是其中一部分,代码越精简越好。
减少请求次数,JS css尽量一次请求
站在用户的角度考虑,如果网页太大的话,响应速度就会慢,响应慢用户体验就差,一旦用户体验差,蜘蛛来抓取的频率就会越来越低
页面小的话,加载速度快一些,蜘蛛的爬取就流畅一些
代码简介更利于抓取
代码越简洁蜘蛛更好抓取
让更多人参与回答