搜外网>搜外问答>问答页面

paper写作网站的robots文件怎么写?

在使用谷歌页面分析工具的时候显示我的paper写作网站有robots错误,我去查看文件才看到没有这个文件。想问问大家这个robots文件应该写哪些内容呢?

追加问题
    2 人参与回答

是的,推推蛙说的没有错

推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo

1、首先可以先了解下Robots文件的作用;
2、如果自己有想要屏蔽禁止蜘蛛或者机器人抓取的文件,可进行屏蔽。