如何写一个合理的robots.txt文件
我这都是网站模板自带的
网上很多答案的，还是需要看自己的
看你网站自身的需求咯。这个东西主要是为了屏蔽不需要收录的动态链接等。
网上有很多工具
让更多人参与回答
