SEO
网站日志蛛抓取的时候,把后端接口-api 也抓了,显示出来的路径都带有后端请求接口,请问是正常的吗? - 搜外SEO问答
搜外网
>
搜外问答
>
问答页面
网站日志蛛抓取的时候,把后端接口-api 也抓了,显示出来的路径都带有后端请求接口,请问是正常的吗?
微信
网站日志抓取的时候,把后端接口-api 也抓了,显示出来的路径都带有后端请求接口,请问是正常的吗?如果不正常的话,要怎样设置比较好?才能避免这个url字段出现呢?
追加问题
交换友情链接,就用搜外友链,方便!
1 人参与回答
收录宝
11162
11161
11160
11159
11158
11157
11156
11155
11154
11153
11152
11151
11150
11279
11278
11277
11276
11275
11274
11273
蜘蛛池
相关问题
看了下网站日志,百度老去抓取404页面,需要在robots文件里面屏蔽吗?
(3 个回答)
各大搜索引擎蜘蛛都指着网站的登录后台目录和系统文件目录抓取
(3 个回答)
看了下网站日志,百度老去抓取404页面,需要在robots文件里面屏蔽吗?
(1 个回答)
网站日志中如何查看自己的网站是否被别人仿站了?
(0 个回答)
百度蜘蛛突然只抓取旧页面,不抓取新页面,什么原因,怎么处理?
(12 个回答)
使用宝塔面板如何查看网站日志分析搜索引擎蜘蛛数据?
(3 个回答)
有懂网站日志怎么看的么?给指点一下
(5 个回答)
头条蜘蛛总是抓不存的链接
(10 个回答)
×
悬赏问题
让更多人参与回答
给问题设置一定金额,将更容易获得关注与回答。
1元
路过一下
3元
意思一下
5元
了解一下
8元
支持一下
18元
有钱任性
88元
我是土豪
选择支付方式
微信支付
支付宝
余额支付
确认支付 →
×
追问
追问