19 人参与回答
最佳回答
加载更多
权重蜘蛛-池出租 等 1 人赞同该回答
1.我看了下你们被收录的页面很多，但是网站本身没有权重也没有IP支撑，权重不高的情况下又被大量页面分权，而大量页面的权重又不能汇集到主页，导致主页的权重很低。建议可以删除一些不重要的页面。
2.我没能打开你们的Robots.txt页面，但也不是404，所以你们也要检查一下是不是网站的稳定性问题。在爬取首页之前，蜘蛛会先爬你的robots.txt页面，可以在robots.txt里添加Sitemap引导爬虫，告诉爬虫哪个是你的首页。
3.当然还有可能是首页经常改版导致的。
好吧，我可能知道问题了……
4.你个土人，我模拟爬虫不能爬取你们的主页，你们这主页是JS调用的，还是用robots.txt或者别的什么手段屏蔽了爬虫？？？
嘶，你屏蔽了什么把，我第一次访问的时候要验证才能访问？为啥
