搜外网>搜外问答>问答页面

我这rotbots有问题吗?咋对蜘蛛不管用啊?

User-agent: *

Sitemap:https://www.bdlsh.com/sitemap.xml

Disallow: /wp-admin/

Disallow: /wp-content/

Disallow: /wp-includes/

Disallow: /*/trackback

Disallow: /feed

Disallow: /*/feed

Disallow: /comments/feed

Disallow: /?s=*

Disallow: /*/?s=*

Disallow: /?r=*

Disallow: /*.jpeg$

Disallow: /*.gif$

Disallow: /*.png$

Disallow: /*.bmp$

Disallow: /?p=*

Disallow: /*/comment-page-*Disallow: /*?replytocom*

Disallow: /a/date/

Disallow: /a/author/

Disallow: /a/category/

Disallow: /?p=*&preview=true

Disallow: /?page_id=*&preview=true

Disallow: /wp-login.php

追加问题
    2 人参与回答
答疑号
答疑号 · SEO售后服务

疫情影响,蜘蛛也受感染了

优狗广告联盟评测
优狗广告联 · 广告联盟评测

看着没问题啊!蜘蛛不听话