为啥老不抓我内页，只抓取首页和一些我根本就没有的目录。还有个伪百度蜘蛛，频繁扫1.rar 2020.rar root.rar。这是在扫我安装包吗？
内链的外链也可以做做的。
多发一下外链引蜘蛛，也可以留首页之外的链接
首先你内页的布局、内容、内链这些有没有做好；其次就是发几个高质量的外链，坚持一段时间后再看看
发一下外链引蜘蛛吧
内页没什么吸引的地方吧
多发下外链
吧
发一下内页的外链，吸引蜘蛛爬
你Robots把一些不让抓取的页面写一下，让他自己只抓你想要他抓的内页， 这文件在哪个目录，直接屏蔽了
让更多人参与回答
