怎么看网站中robots文件 看看蜘蛛来网站爬行的时间呢 www.tianchiyedanguan.com
网站日志啊
Robots只是设置蜘蛛抓取权限的，想看蜘蛛抓取次数及时间，去你服务器里下网站日志，然后用日志分析工具看，如果是织梦或者zblog模板站，应该有查看蜘蛛的插件
看你自己网站的日志
在日志里看的 一般都是wwwlog的文件夹 .log文件 你找找 有专业的日志分析工具 loghao
网站日志啊 哥哥 你这牛头不对马嘴啊
想要看蜘蛛爬行，就去网站日志里面看啊，你说的那文件根本就是俩码事了
你也是秀儿，Robots是爬取权限设置，想看蜘蛛爬行，去网站日志看。
看蜘蛛爬行的时间在Robots里是看不到的，robots只是告诉蜘蛛什么该爬什么不该爬
想要看到蜘蛛爬行的时间是要看服务器日志的
让更多人参与回答
