搜外网>搜外问答>问答页面

求助!怎么不让蜘蛛爬取网站下的某个域名

网站解析了两个域名,但是因为其他原因不能做301重定向,所以怎么让其中一个域名不被蜘蛛爬取收录

追加问题
    2 人参与回答
推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo

1、在不想被抓取的域名的程序里,加Robots,封禁整站; 

2、整站屏蔽蜘蛛抓取。(上线前就操作为佳)

武荣网络
武荣网络 · 网站建设/仿站、美团点评运营、云服务器、DIY小程序、网站优化(SEO)、竞价托管(SEM)、网络推广。☛☞

如果你有两个域名都解析到了同一个网站,但因为某些原因不能做301重定向,你可以使用Robots.txt文件来让其中一个域名不被搜索引擎蜘蛛爬取和收录。

SEO培训招生中
190