4 人参与回答

这个要在你网站的 Robots.txt文件里去添加设置百度蜘蛛可以抓取的和不能抓取的,得自己去设置,具体得操作可以百度一下

百度搜索资源平台里有教

王金亮
王金亮 · 个人站长 SEO优化 搜索排名 90后魔漂一枚~15870837476(同微信)互相交流

Robots.txt用法:
Disallow(不允许)
Allow(允许)

用法一:
User-agent: *
Disallow: /
(禁止所有搜索引擎抓取网站页面)

用法二:
User-agent: *
Disallow:
(允许所有搜索引擎抓取网站页面)

用法三:
User-agent: *
Allow:
(允许所有搜索引擎抓取网站页面)

百度搜一下,我之前有了解过,现在忘记了