搜外网>搜外问答>问答页面

网站Robots协议没有禁止蜘蛛抓取为什么蜘蛛不来？

微信

网站蜘蛛长时间不来了，我查看了也没有禁止蜘蛛抓取，可蜘蛛就是不来网站了，为什么就不来网站抓取内容了？网站究竟哪里问题导致蜘蛛不来了，服务器稳定我也每天提交链接百度，有哪里不对呢？

Robots 举报 本帖由用户发布，如有侵权联系删除 2021-09-30 发布500 次浏览

8 人参与回答

张

多发点外链试试，多提交

小米

多提交一下链接

去站长后台做一下抓取诊断，看看蜘蛛能不能抓到你的页面，可以的话，多发外链，主动提交URL，吸引蜘蛛抓取，交换友链，提高域名信任度，也可以使用蜘蛛池，收录宝等工具辅助收录。如果觉得收录太差，也可以带上一部分你认为未收录但质量较高的链接去百度站长平台反馈。

迷％离 · 网站客服系统、在线聊天软件、智能客服系统

网站首页投诉一下，让网站首页重新收录

夜场网 · 全国招聘网

内容质量一定要跟上才行的

企业名录大 · 客套企业名录，内置1亿+企业名录线索库，轻松开拓企业客户。

多发点外链试试呢，有可能就是网站质量不太好蜘蛛越来越少

SEO小枫

百度的蜘蛛有一个调整的时间，不是当时就会产生效果的。Robots只能屏蔽掉自动到本网站进行爬取的蜘蛛，如果你的某个页面在站外其他地方有留下外链的话，蜘蛛还是通过外链访问某个页面。

螺旋钢管 · 专注企业SEO优化

有哪里不对呢？

收录宝