17 人参与回答
推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo
SunShine 等 1 人赞同该回答

1、网站日志文件分析,这个可以大概去查看下蜘蛛的来路,是用户还是蜘蛛来访,访问那些页面等等;
2、你想要看到的,在线日志分析网站,日志分析软件,及自己去用excel表分析网站日志这些都能查看;
3、蜘蛛这里面有真的和假的,自己辨别下即可,蜘蛛是抓取爬行真实存在的,如果抓取爬行不存在的多半是虚假蜘蛛,不影响可忽略。

1、网站日志可以大概看下蜘蛛来路,用户访问那些页面等信息。

2、在线日志分析网站和软件及xcel表分析网站日志都可以查看。

3、判断一下真假蜘蛛,真蜘蛛是真实存在的,不存在的多半是虚假蜘蛛可忽略。

在吗在
在吗在 · 寻水的

这问题问的,,,

蓝秋风
蓝秋风 · 个人擅长网站建设,前端编程。辅助seo,网络营销竞价信息流

不需要软件,网站服务器,比如阿里云里面就有网站日志导出功能,用记事本打开,F12快捷找到所有baiduspider把ip复制下来,cmd下输入ip+nslookup,查看这个蜘蛛是不是百度自己的蜘蛛,是的话上面会有标识baidu

把日志导出来,用分析工具分析

金泰福
金泰福 · 西安金泰福进口越野车、商务车、房车等!

直接在日志里看就好了呀

琪琪七七
琪琪七七 · 防雷相关

在日志里面能看到

把日志导出来,用分析工具分析

日志里面可以看的哦

厦门在乎科技
厦门在乎科 · SEO优化

1.查看UA,如果UA都不对,可以直接判断非百度搜索的蜘蛛,目前对外公布过的UA是:
移动UA:Mozilla/ (linux;u;Android ) APPleWebKit/ (KHTML,like Gecko) Version/ Mobile Safari/ (compatible; Baiduspider/ +)
PC UA:Mozilla/ (compatible; Baiduspider/ +)

2.反查IP
站长可以通过DNS反查IP的方式判断某只spider是否来自百度搜索引擎。
在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup (IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以. 或. 的格式命名,非 *. 或 *. 即为冒充。

用光年,或者爱站工具包可以查看

西接拉阿木丿
西接拉阿木 · 那木西撇,色拉恩子,做一个佛系SEO,谢谢大佬来互点刷点访问量,有点必回

看日志看日志看日志

看日志,或者把日志导出,用网站日志分析工具看

加载更多