禁止所有搜索引擎抓取网站中的一个页面robots.txt怎么写！求大神！

Question

回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法

本贴交流超时，回复已关闭

Answer 1

海阔天空 · 315防伪标签办理中心-全国315产品防伪查询中心

写的都不错哦

Answer 2

浅语

Robots.txt也不是百分百可以禁止抓取

Answer 3

MR.No

同意大家的观点

Answer 4

武荣网络 · 网站建设/仿站、美团点评运营、云服务器、DIY小程序、网站优化(SEO)、竞价托管(SEM)、网络推广。☛☞

要禁止所有搜索引擎抓取网站中的一个页面，可以在该页面的根目录下创建一个名为“Robots.txt”的文件，并在其中添加以下内容：

User-agent: *

Disallow: /pagename

其中，“pagename”应替换为要禁止搜索引擎抓取的页面的实际文件名。这样，所有搜索引擎的爬虫程序都将不会访问该页面，因为它们遵循了robots.txt中的指令。

Answer 5

金榜

同意大家的观点

Answer 6

代码：Disallow: /bin/

收录宝