搜外网>搜外问答>问答页面

有知道这个是什么意思的吗 网站

<p><a href="http://www.ccjiaheccgs.cn/robots.txt" target="_blank" data-url="www.ccjiaheccgs.cn" class="show-5118-data" rel="nofollow">http://www.ccjiaheccgs.cn/robots.txt</a><br></p><p></p>

追加问题
    3 人参与回答
亿百科
亿百科 · 互联网爱好者、seo业余选手、新媒体从业者

Robots.txt协议,禁止搜索引擎蜘蛛爬取设置好的路径。

这不就是网站的Robots

Robots禁止爬这些目录