日志查询到蜘蛛大量访问图片和css等文件,禁止了的话能让蜘蛛有时间抓取其他更多页面增加收录吗
为什么要禁止抓取图片呢
不要禁止,不然你网站、文章等图片都没办法抓取,就不能展现了
不要禁
不需要,因为蜘蛛识别不了
不需要的,因为网站图片还是需要抓取的, 我的是文章站,图片仍然需要抓取。
让更多人参与回答