搜索引擎蜘蛛爬行和抓取的规则是什么？
都样的优化方式，为什么蜘蛛不来网站里抓取，以前是来过多数抓取不被收录了，所以我想问一下各位，蜘蛛爬取的规则是什么？为什么有时候更新不被爬取，有时候爬取也没有收录，是网站哪里出问题了，还是爬取一两次也没有用，反复多爬取几次才被收录？感恩帮我解答问题的大佬们！
都样的优化方式，为什么蜘蛛不来网站里抓取，以前是来过多数抓取不被收录了，所以我想问一下各位，蜘蛛爬取的规则是什么？为什么有时候更新不被爬取，有时候爬取也没有收录，是网站哪里出问题了，还是爬取一两次也没有用，反复多爬取几次才被收录？感恩帮我解答问题的大佬们！
