robots.txt文件写法规则是怎么的？
robots.txt文件写法规则是怎么的？
其中写了
Disallow:/*_gaoqi/
意思是
Disallow:/123_gaoqi/
Disallow:/eee_gaoqi/
Disallow:/9e9_gaoqi/
这种类型的都拒绝蜘蛛抓取吗？
robots.txt文件写法规则是怎么的？
其中写了
Disallow:/*_gaoqi/
意思是
Disallow:/123_gaoqi/
Disallow:/eee_gaoqi/
Disallow:/9e9_gaoqi/
这种类型的都拒绝蜘蛛抓取吗？
