9 人参与回答
燕子
燕子 · 达尔文服装智造平台_为跨境电商企业提供服装货源的供应链

禁止所有搜索引擎抓取

除了1楼,其他的都是在开玩笑吗?

ζCóngFlyぺ
ζCóng · seo优化,电脑方面

这就是一个最普遍的写法 一般网站默认Robots文件就是这么写的   就是允许所有搜索引擎抓取所有页面   第二行 如果你填啥路径 就是啥不让抓取

么么么 · www.snmky.org www.crbsc.org

禁止抓取

禁止抓取路径啊,没必要的文件你就可以放上去,然后百度就停止抓取了

不抓取所以页面

灵猫优化
灵猫优化 · 长期高价收购古董古玩古钱币 →→→→→→→→→→→→→→→→→→→→→→→点→→→→→→→这→→→→→→→里→→→→

User-agent: *

第一条:意思是允许所有搜索bai引擎收录,星号代表所有。

Disallow:

第二条:意思是禁止搜索引擎收录页面。

MiLe
MiLe · 每一个成功者都有一个开始

禁止抓取所有吧

SEO培训招生中
149