搜外网>搜外问答>问答页面

网站Robots协议没有禁止蜘蛛抓取为什么蜘蛛不来？

微信

网站蜘蛛长时间不来了，我查看了也没有禁止蜘蛛抓取，可蜘蛛就是不来网站了，为什么就不来网站抓取内容了？网站究竟哪里问题导致蜘蛛不来了，服务器稳定我也每天提交链接百度，有哪里不对呢？

追加问题
Robots
本帖由用户发布，如有侵权联系删除  2021-09-30 发布618 次浏览
举报
其他问题
 
    8 人参与回答
用户176775

多发点外链试试，多提交

4 年前
IP属地：重庆
赞同 0 评论 0
收藏 举报
评论取消
用户198386

多提交一下链接

4 年前
IP属地：湖南
赞同 0 评论 0
收藏 举报
评论取消
用户174561

去站长后台做一下抓取诊断，看看蜘蛛能不能抓到你的页面，可以的话，多发外链，主动提交URL，吸引蜘蛛抓取，交换友链，提高域名信任度，也可以使用蜘蛛池，收录宝等工具辅助收录。如果觉得收录太差，也可以带上一部分你认为未收录但质量较高的链接去百度站长平台反馈。

4 年前
IP属地：陕西
赞同 0 评论 0
收藏 举报
评论取消
用户122498 · 网站客服系统、在线聊天软件、智能客服系统

网站首页投诉一下，让网站首页重新收录

4 年前
IP属地：北京
赞同 0 评论 0
收藏 举报
评论取消
用户206120 · 全国招聘网

内容质量一定要跟上才行的

4 年前
IP属地：江西
赞同 0 评论 0
收藏 举报
评论取消
用户194940 · 客套企业名录，内置1亿+企业名录线索库，轻松开拓企业客户。

多发点外链试试呢，有可能就是网站质量不太好蜘蛛越来越少

4 年前
IP属地：山东
赞同 0 评论 0
收藏 举报
评论取消
用户204072

百度的蜘蛛有一个调整的时间， 不是当时就会产生效果的。Robots只能屏蔽掉自动到本网站进行爬取的蜘蛛，如果你的某个页面在站外其他地方有留下外链的话，蜘蛛还是通过外链访问某个页面。

4 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消
用户7639 · 专注企业SEO优化

有哪里不对呢？

4 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消

收录宝

34745 44937 57772 69180 79710 91203 99966 08858 17669 27903 36627 54872 69088 80707 92328 03775 14054 28586 44524 52494

蜘蛛池

知识产权运营平台
搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司