搜外网>搜外问答>问答页面

日志分析发现一堆没有的数据页面,不断的在抓取,是什么情况? 悬赏4元 已结束

<p><br></p>

追加问题
    17 人参与回答
最佳回答

没有答案.......

思思
思思 · 劳务派遣,劳务外包,人事代理,QQ2448907263

会有一些是假蜘蛛

兴隆源木雕网
兴隆源木雕 · 金丝楠木、海南黄花梨木雕

应该是假蜘蛛留下的轨迹

看看是不是百度的蜘蛛,假的蜘蛛就屏蔽这个文件夹,不需要的垃圾文件夹都可以屏蔽,

tony301
tony3 · seo 4年,什么都略懂一些什么

会有一些是假蜘蛛,模拟爬行。爬一些不 存在的目录、页面、图片,返回404页面,特烦。。。

linkbao
linkb · 网址链条:让网站收录和关键词排名更简单!

先判断是否是真实的蜘蛛,如果不是就不管它

木偶
木偶 · www.sjyj.com.cn-神圣计划软件官网

多半是假蜘蛛,扫描漏洞,或者镜像你的网站

古圣资源网
古圣资源网 · 网络推广

假蜘蛛

三郎
三郎 · 南京车位涂鸦

可能是假蜘蛛留下的,引诱你点击的

币云谷
币云谷 · 51好项目网

这个蜘蛛挺多的啊

可能是假蜘蛛在模拟爬行

推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo

1、站点无哪些URL,这些URL也不会被收录,那么不影响网站;

2、可能是虚假的蜘蛛模拟爬行;

3、真蜘蛛不会抓取不存在的网页内容;

4、可持续观察,看看抓取持续几天;

大青山
大青山 · 深圳翻译公司-SEO还在潜修

日志里有假蜘蛛

陈兵
陈兵 · 发电机组生产厂家

晕,不知道你这咋回事

多去跟新就好了  ,日志偶尔看看就好了

加载更多
SEO培训招生中
188