<p>为什么会抓出这种页面</p>
1、网站地图生成工具,抓取的都是网站里面可爬行的;
2、你圈选的URL里我看了2个,建议考虑集权,同时他们不是404,我这边查看返回码是200正常码,页面可正常访问,你可以抓取诊断看看;
ps:爬的是404,可以去抓取诊断,蜘蛛模拟看下
你是不是被人黑了吧
到百度上找找看,有解决办法的哦
到百度上找找看,有解决办法的
@推推蛙,大佬有空吗帮忙看看可以吗
让更多人参与回答