这是什么蜘蛛啊,两页多都是这个蜘蛛,会不会对网站有什么影响
<p>这个other bot是哪里的蜘蛛,查了一下这个ip是德国的,会不会对网站有什么影响</p><p><br></p><p></p>
9 人参与回答
这种爬虫没什么用 不用管他
不是恶意的就没事
垃圾蜘蛛来着,如果影响网站打开可以禁掉
根据访问时间来说,问题不是很大。
只要网站没事
好的,学习了
1、网站一切正常,并未出现打不开情况,这种蜘蛛抓取无影响,忽略就好;
2、如果有恶意蜘蛛抓取,导致网站打不开,就需要考虑封禁。
只要网站没事 我都是不管