搜外网>搜外问答>问答页面

蜘蛛老是抓取这些内容是什么原因

微信

<p><br></p>

追加问题
举报 本帖由用户发布，如有侵权联系删除  2021-08-18 发布734 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    9 人参与回答
创业项目
创业项目 · 免费分享自媒体,抖音带货,闲鱼，seo，短视频,剪切视频等一系列课程
我的微信:sec_vip 等 1 人赞同该回答

一直禁止了噻

3 年前
IP属地：重庆
赞同 1 评论 0
收藏 举报
评论取消
尚博思连锁管理系统
尚博思连锁 · 专业做美发、美容、养生、按摩、推拿、美甲行业收银系统
我的微信:sec_vip 等 1 人赞同该回答

设置Robots禁止就可以了

3 年前
IP属地：山东
赞同 1 评论 0
收藏 举报
评论取消
梦梦
梦梦 · 泰海科技12年服务经验，专注于服务器租用
我的微信:sec_vip 等 1 人赞同该回答

重复抓取没啥影响的，不想让抓取直接禁止就可以

3 年前
IP属地：河南
赞同 1 评论 0
收藏 举报
评论取消
DD的西瓜
DD的西瓜
我的微信:sec_vip 等 1 人赞同该回答

设置Robots禁止

3 年前
IP属地：浙江
赞同 1 评论 0
收藏 举报
评论取消
聘达人
聘达人 · 聘达人是一家高速成长的灵活用工一站式就业服务平台公司总部位于北京市亦庄开发区。我们致力于为中国蓝领与基层白领群体打造
我的微信:sec_vip 等 1 人赞同该回答

Robots禁止就可以了

3 年前
IP属地：北京
赞同 1 评论 0
收藏 举报
评论取消
丰瑞旋转接头
丰瑞旋转接 · 滕州丰瑞旋转接头为您提供动态密封解决方案。
我的微信:sec_vip 等 1 人赞同该回答

在Ropots禁止就好了

3 年前
IP属地：山东
赞同 1 评论 0
收藏 举报
评论取消
人生＝π
人生＝π · 建站小程序空间域名服务器百度爱采购
我的微信:sec_vip 等 1 人赞同该回答

如果不想让抓取，直接设置Robots

3 年前
IP属地：河北
赞同 1 评论 0
收藏 举报
评论取消
Plum
Plum · 聚乙烯醇缩丁醛-天元化工网-小小站长,兢兢业业！
我的微信:sec_vip 等 1 人赞同该回答

你设置Robots禁止咯

3 年前
IP属地：广东
赞同 1 评论 0
收藏 举报
评论取消
搜外微信
提供服务
常用链接
产品实验室
©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司