SEO
聚集100万网络营销实战家
跟夫唯老师学SEO
提问题
建网站
换友链
登录
网站的接口老是被蜘蛛访问,需不需要写到robots协议里,禁止蜘蛛抓取呢? - 搜外SEO问答
搜外网
>
搜外问答
>
问答页面
网站的接口老是被蜘蛛访问,需不需要写到robots协议里,禁止蜘蛛抓取呢?
微信
追加问题
交换友情链接,就用搜外友链,方便!
5 人参与回答
你我皆凡人
·
小团队创业型,一直在失败,一直在向前努力
有的搜
索引
擎不规矩,禁止了一样爬去,很麻烦
WoChe
嗯,直接禁止就好了
三九问答
·
专业的有问必答平台
无关的目录和文件建议写进去禁止爬
淋淋的脸
可以禁止的
Faith
可以。禁止爬行。
回复问答禁止带推广链接、违法词及灌水,违规将封禁账号!!
了解合理带链接的方法
本贴交流超时,回复已关闭
排名一直没有上首页的关键词,什么原因
网站内容质量不行被百度k了,要不要把低质量的链接一次性删除了提交死链
这两天我的网站百度快照http都变成了https
服务器上下行流量一秒几十兆是怎么回事?
网站的权重值是如何一步一步提升的?和什么有关系呢?
搜 老刘博客 只能搜索到首页快照,文章页没有,怎么优化?文章页每篇机会都有这个词“老刘博客”
现在做下载站,谁有包更新的帝国cms源码?我买
这个网站的关键词设置的难度指数大吗?
网站关键词是聚合硫酸铁,前段时间排名上到首页,不过是内页。没保持半个月排名就掉到了第8页,如何恢复
为什么网站关键词排名浮动很大,有什么方法能稳定下来
提交问题
相关问题
网站换了新的服务器之后,过了很久还一直抓取失败,检测了robots文件没有问题
(5 个回答)
生成了多个网站地图,robots内怎么设置?
(8 个回答)
请问蜘蛛大量抓取js和css文件,用robots屏蔽会不会对网站造成影响
(10 个回答)
这几天很多访问404的怎么回事?
(22 个回答)
paper写作网站的robots文件怎么写?
(2 个回答)
目前网站的robots协议变成了这个,这个到底是允许还是不允许啊?
(12 个回答)
网站robots.txt文件如何编写,哪些内容应该屏蔽?
(0 个回答)
网站内容没有被搜索引擎抓取可能有多种原因,以下是一些可能的原因和解决方法:
(3 个回答)
收录宝
.jxzz
napad
rmm.c
.jjj.
189
×
悬赏问题
让更多人参与回答
给问题设置一定金额,将更容易获得关注与回答。
1元
路过一下
3元
意思一下
5元
了解一下
8元
支持一下
18元
有钱任性
88元
我是土豪
选择支付方式
微信支付
支付宝
余额支付
确认支付 →
×
追问
追问