搜外网>搜外问答>问答页面

在robots文件中屏蔽了一些链接，但搜索引擎还是会收录

微信

明明已经在robots文件中disallow了，搜索引擎还是会抓取收录，怎么让他们删除并不再抓取？

Robots 索引举报 本帖由用户发布，如有侵权联系删除 2024-01-10 发布802 次浏览

广告位出租

广告位出租-排名优化

交换友情链接，就用搜外友链，方便！

0 人参与回答

该问题还没有收到回答 :(

回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法

本贴交流超时，回复已关闭

网站抓取频率下降是什么原因导致的？

python爬虫爬一个网站要多久？

做seo转行到sem？难不难？值得做吗？

网站换了CMS，如何把旧网站的数据全部弄到新网站里面？

为什么我的某些文章能在百度上搜到，而有的就搜不到呢？

网站改版删除了之前的文章现在百度蜘蛛一直抓404，已经一个月了，新发的内容一点都被抓

网站有二十天左右没有收录就是进入沙盒期了吗？

新网站有排名没有收录是什么原因？

在网站SEO优化中做什么样的关键词更容易有排名？

友情链接怎么互动交换友情链接？

SEO培训招生中

189