日志看到有蜘蛛在爬sitemap文件,就爬一下。却看不到蜘蛛爬sitemap里面的链接。这是不是没有爬到链接
蜘蛛要看ip,不知道是真蜘蛛还是假蜘蛛,Sitemap是你整个网站的链接,需要去站长资源看抓取情况,它会自动爬取的
去站长资源看抓取情况,它会自动爬取的
有的时候不太稳定,多观察一段时间
多观察一段时间
让更多人参与回答