11 人参与回答

百度一下

设置不让抓取就行了。

ca15.cn免费收录各种网站
ca15. · SEO小学生,欢迎提交网站目录,右侧链接

Robots.txt 设置

Disallow:不让抓的页面

Robots文件里加禁止就行,具体可以百度一下

Robots.txt 设置

Disallow:不让抓的页面

设置不让抓取就行了。

此后故乡只有冬
此后故乡只 · 爱云查

百度抓取的,并且是随机抓取的

半岛铁盒
半岛铁盒 · 国际学校丨出国留学丨雅思托福丨小语种辅导

Robots里面加,找到这个文章页之后再robots文件里变把这个文章页禁了

冷却塔
冷却塔 · 冷却塔

那就禁止抓取啊

螺旋钢管
螺旋钢管 · 专注SEO优化12年

提交 不断的提交 哈哈

ゞ...
ゞ... · B2B免费信息发布网》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》》

Robots.txt