蜘蛛来网站后为什么只抓取首页和css js这些,内页它不香吗,为啥不抓取?
看网站日志里面抓取都是这种情况:
首页 css js 然后走了一会又来了→首页 css js 然后走了一会又来了→首页 css js 然后走了一会又来了....
各种提交啥的也做了,内链结构啥的也没问题,
请问是怎么回事?
看网站日志里面抓取都是这种情况:
首页 css js 然后走了一会又来了→首页 css js 然后走了一会又来了→首页 css js 然后走了一会又来了....
各种提交啥的也做了,内链结构啥的也没问题,
请问是怎么回事?