robots禁止抓取某个链接如何写?
禁止抓取网址URL,网站robots禁止抓取某个链接怎么写?具体如何操作,哪位大神指点一下,我想禁止不让抓取页面的URL,禁止后蜘蛛也不抓取了,也不收录了?
回复问答禁止带推广链接、违法词及灌水,违规将封禁账号!!了解合理带链接的方法
本贴交流超时,回复已关闭
禁止抓取网址URL,网站robots禁止抓取某个链接怎么写?具体如何操作,哪位大神指点一下,我想禁止不让抓取页面的URL,禁止后蜘蛛也不抓取了,也不收录了?