大神们，我网站有个ua总是抓取大量不存在的url .js .php之类的，ua能不能封禁了？
<p>大神们，我网站有个ua总是抓取大量不存在的url .js .php之类的，抓取大的页面90%显示404页面，从没见过该ua，也查不到，这个ua能不能封禁了？</p><table><tbody><tr><td>Mozilla/5.0 (Linux; Android 8.1; EML-L29 Build/HUAWEIEML-L29; xx-xx) AppleWebKit/537.36 (KHTML, like Gecko) Version/4.0 Chrome/65.0.3325.109 Mobile Safari/537.36 (iPad; iPhone; CPU iPhone OS 13_2_3 like Mac OS X)</td>
</tr></tbody></table>
17 人参与回答
是不是你在什么地方设置 抓取网页链接网址地图任务了
应该没什么意义
可以的啊这个
抓了也没什么用的
这个抓取了 也没啥用啊
抓了也没什么用的
这个不用管，没啥用
这种没什么意义
不影响网站本身的优化
这种抓取了也没有用的
这种抓取了也没有什么用
这个抓取了 也没啥用啊
没事，抓取了也没影响的
抓了也没什么用的
这种抓取没啥用啊
