网站蜘蛛过来爬取页面了,每次爬取页面也是正常的,怎么没有看到蜘蛛爬取记录痕迹,蜘蛛爬取没有记录是哪里问题,网站各个页面都是正常的,就是蜘蛛爬取没有记录咋回事?有什么工具或者查询看看有没什么问题存在?
有没有开启日志记录功能,没有勾选的话是不会记录的
网站在建站时所选用的域名有过被惩罚或者被百度K过的域名,站长们没有对域名的安全性进行更多的检查和了解,导致域名更难收录。 网站内容质量不过关,采集的内容太多,导致蜘蛛在爬行网站时对网站没有太好的印象。 发布的外链质量都不高,优化人员们一定要注重外链的数量和质量的布局和放置。
只要日志功能是齐全的,任何蜘蛛抓取页面都有记录,不然就是你的日志功能受到限制,或者是没有发现!
检查下你宝塔上有没有开启日志记录功能,没有勾选的话是不会记录的
让更多人参与回答