蜘蛛最近来网站频率次数挺多,问题是蜘蛛总是抓取一个页面,重复的页面蜘蛛抓取多次,其余页面根本不被抓取,这是咋回事怎么就认准一个页面?我怎么引导蜘蛛抓取其余页面,让其余页面有抓取?
觉得百度相当随缘
随缘抓取
是在什么时间抓取这个同一个页面呢
很有可能是页面框架问题,改善布局试一试
让更多人参与回答