搜外网>搜外问答>问答页面

蜘蛛是爬取xml文件还是爬取html文件的呢？ 悬赏1元 已结束

微信

蜘蛛是爬取xml文件还是爬取html文件的呢？有没有必要做html的网站地图呢

追加问题
本帖由用户发布，如有侵权联系删除  2022-05-10 发布943 次浏览
举报
其他问题
 
    22 人参与回答
用户144761 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信：tuituiwaseo
用户156223 等 1 人赞同该回答

1、网站地图，百度站长可提交的格式是txt和xml，一般没有必要去在网页里加html导航地图； 

2、提交推送的渠道有手动提交、api推送、Sitemap提交、正常优化蜘蛛主动去爬行抓取，如果是因为自身站点有必要去做html地图导航便于用户快速找到内容，那么可以考虑做一个导航页，这个导航页返回码是200正常码，有通道也是被抓取； 

ps：无需刻意在网页加html的导航地图，蜘蛛能直接抓取爬行的渠道是百度站长里面的提交推送（手动、api、Sitemap）

3 年前
IP属地：天津
赞同 1 评论 0
收藏 举报
评论取消
用户186250

html地图是给人看，txt和xml是给蜘蛛看的

3 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
用户213035 · 怡合达专业从事自动化零部件研发、生产和销售,提供FA工厂自动化零部件一站式供应

两种都可以设置一下，并不冲突

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户213552 · 喜欢网络技术、喜欢搜索引擎优化

xml格式，这个有利于搜索引擎蜘蛛

3 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
用户191021 · 擅长日本动漫、以及各类影视写真题材、5iv88影视点击最右边就能免费get到

txt和xml,都一样的

3 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消
用户151427

一般是xml和txt格式的

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户205236 · 网站建设 自助建站 快速建站

现在html已经没啥大用了

3 年前
IP属地：北京
赞同 0 评论 0
收藏 举报
评论取消
用户137963 · 专业的ERP定制开发、小程序开发、软件外包、软件开发服务商, 定制化开发服务, 擅长小程序开发,微商城开发,PHP项

两种都是一样的

3 年前
IP属地：江苏
赞同 0 评论 0
收藏 举报
评论取消
用户143544 · 有一个愿望：每个站长都能够原创，不再是相互采集，以前采集修改开始/结尾内容，后来二合一，再后来Ai伪原创...

txt和xml都可以，感觉xml比较好。

3 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
用户118646 · 泰海科技12年服务经验，专注于服务器租用

一般都是xml，TXT比较友好

3 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
用户213633

百度站长工具提交一下

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户188469

没太大必要...xml和TXT 够用了，

3 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
用户106307 · wwwwfyxbcn

html地图是给人看，txt和xml是给蜘蛛看的

3 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
用户204715 · pe管生产厂家18956729555，专业生产pe给水管、钢丝网骨架复合管、mpp电力管、燃气管、ppr管

1、蜘蛛是爬取xml文件还是爬取html文件，两种是一样的。
2、有没有必要做html的网站地图，没有必要改，这不是给人看的，是给蜘蛛看的，蜘蛛能看懂即可。

3 年前
IP属地：安徽
赞同 0 评论 0
收藏 举报
评论取消
用户185416 · 钕铁硼生产厂家、东莞强磁厂家

两种都一样的吧 Sitemap 两种格式都可以

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户130395

两种都是一样的，可以自己选择

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户178692

两种都一样的吧 Sitemap 两种格式都可以

3 年前
IP属地：山西
赞同 0 评论 0
收藏 举报
评论取消
用户189656 · 泛微OA华南区，专注协同管理软件领域20年

两种都一样的吧 Sitemap 两种格式都可以

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户202556 · 专业一体化污水处理设备、溶气气浮机源头厂家！

用xml比较好，

3 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
用户215591

两种都一样的吧 Sitemap 两种格式都可以

3 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
用户167673

百度站长工具提交xml就行了

3 年前
IP属地：江西
赞同 0 评论 0
收藏 举报
评论取消
用户195267 · 奈斯导航为广大网民精心筛选、整理国内外各类优秀的网站大全，各位站长可以免费提交收录。==》

没必要，你在站长平台提交就爬行哪个，或者在Robots文件里面写了地图链接，就会爬行，不过，一般都在站长平台提交最好。

3 年前
IP属地：海南
赞同 0 评论 0
收藏 举报
评论取消

收录宝

app.c app.c app.c app.c app.c app.c app.c app.c app.c app.c app.c app.c app.c app.c app.c app.c index index index index

蜘蛛池

AI论文
搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司