蜘蛛是爬取xml文件还是爬取html文件的呢?有没有必要做html的网站地图呢
1、网站地图,百度站长可提交的格式是txt和xml,一般没有必要去在网页里加html导航地图;
2、提交推送的渠道有手动提交、api推送、Sitemap提交、正常优化蜘蛛主动去爬行抓取,如果是因为自身站点有必要去做html地图导航便于用户快速找到内容,那么可以考虑做一个导航页,这个导航页返回码是200正常码,有通道也是被抓取;
ps:无需刻意在网页加html的导航地图,蜘蛛能直接抓取爬行的渠道是百度站长里面的提交推送(手动、api、Sitemap)
html地图是给人看,txt和xml是给蜘蛛看的
两种都可以设置一下,并不冲突
xml格式,这个有利于搜索引擎蜘蛛
txt和xml,都一样的
一般是xml和txt格式的
现在html已经没啥大用了
两种都是一样的
txt和xml都可以,感觉xml比较好。
一般都是xml,TXT比较友好
百度站长工具提交一下
没太大必要...xml和TXT 够用了,
1、蜘蛛是爬取xml文件还是爬取html文件,两种是一样的。 2、有没有必要做html的网站地图,没有必要改,这不是给人看的,是给蜘蛛看的,蜘蛛能看懂即可。
两种都一样的吧 Sitemap 两种格式都可以
让更多人参与回答