搜外网>搜外问答>问答页面

网站上线之后被收录了,再添加robots文件屏蔽蜘蛛,对于seo有意义吗?

追加问题
    11 人参与回答

有用的

94爱网赚论坛
94爱网赚 · 网络赚钱, 创业者, 薅羊毛, 兼职网, 资源分享, 网赚论坛

这个是想做上改网站内容?引流到其他地方,是个思路

有额,蜘蛛一般每天都会来抓取,保证每次都抓取到你想让它抓取的部分

上线后也可以拒绝蜘蛛抓取的

杭州继保
杭州继保 · 微机保护行业

应该有的作用

应该有的

推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo

1、不想收录的页面被收录了,后期disallow也是为了防止蜘蛛再次抓取更新;

2、后期随着时间的推移,百度蜘蛛再来抓取一直不允许,可能会被索引库删除这个页面。

SEO培训招生中
188