百度、搜狗、谷歌的蜘蛛就一直抓取我网站的后台登录系统链接,是login.php结尾的,后续还有一连串的动态URL一样,而且时间都是每天17点左右开始一直抓取,这是怎么情况?该怎么处理啊
假的,用nslookup一下IP,真的蜘蛛会显示像这样的: 名称: baiduspider-220-181-108-89
肯能不是真蜘蛛
估计是有人对你的后台进行注入,把换成其他名字,不让他人轻易知道你的后台地址。更不要在Robots中做屏蔽,因为人为可以看到/暴露你的后台地址。
这个不一定是蜘蛛
Robots里面设置,只允许爬取的路径,可以隐藏这个的
1、你的网站前端是否有登录界面的端口URL,如果有,那么蜘蛛抓取爬行有通道的URL也是正常的; 2、如果你前端并没登录端口URL,正常蜘蛛是不会爬行到和专门去爬行这个URL; 3、一般可能有虚假的蜘蛛会,或者黑站点的可能会爬登录端口; 4、前端有登录端口,蜘蛛可爬行,那么就没啥问题。
注意服务器做好的安全防护
是不是黑网站的,多关注下,你把端口改改好了
让更多人参与回答