页面抓取优先级问题,百度蜘蛛抓取页面是,先title然后是h1,然后是怎么抓取的呢,详细问题看下描述
问题的意思就是:一个网页开头肯定是TDK,然后可能在网页中间位置出现了H1标签,那么蜘蛛在进入这个页面时候,它的抓取规则是什么样的,首先抓取title,然后是H1标签,然后呢。是返回头部title位置由上而下的抓取,还是跳过了title和h1标签的部分,从h1标签开始向下抓取了? 求大神解答一下
0 人参与回答
该问题还没有收到回答 :(