网站优化每天进来爬取页面的蜘蛛不少，问题是蜘蛛抓取页面了没有痕迹和记录，怎么会有抓取页面没有痕迹了呢？为什么蜘蛛抓取没有记录了呢？没有记录的抓取数据是没有作用的，如何引导蜘蛛正确的抓取页面？怎么让蜘蛛抓取页面更多？
可以通过查看网站日志来查看蜘蛛痕迹。
蜘蛛抓取页面没有记录痕迹？查看网站日志是否有记录
进来报个道就跑了
让更多人参与回答
