<p>我的抓取频率一直很低，也不收录，一看日志文件，百度蜘蛛怎么都是抓取robots文件，代表我的robots文件写错了吗，求解答</p><p><br></p>
Robots你允许抓取，蜘蛛抓了这个文件应该会顺着去抓别的页面吧
看那些Ip也不像百度蜘蛛
那你应该把你的Robots文件放出来啊~~
让更多人参与回答
