搜外网>搜外问答>问答页面

WordPress搭建的网站百度蜘蛛抓取了很多某明奇妙的文件，该怎么办？ 推荐热议

微信

<p>在robots文件中也限制了的，还是来抓取。全部都是404页面，该怎么办啊？</p><p><br></p>

追加问题
Robots 404页面 WordPress 404 举报 本帖由用户发布，如有侵权联系删除  2019-12-24 发布1,990 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    28 人参与回答
用户
用户

管他

4 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
佰草
佰草 · SEO，建站，仿站

这蜘蛛假的，别人伪装的

4 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
艾塔SEO
艾塔SEO · 艾塔SEO五年专注于网络营销行业。

这种不见得是百度蜘蛛，也可能是别人恶意扫描，扫你网站漏洞的

4 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
江上清风
江上清风 · 网络推广

不用管

4 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
fcjs56_com
fcjs5 · wwwfcjs56com

写一下Robots文件限制一些文件的抓取

4 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
赧然的贼
赧然的贼 · 辽宁新福龙纸箱厂（www.lnxflgs.com）

假蜘蛛吧

4 年前
IP属地：贵州
赞同 0 评论 0
收藏 举报
评论取消
祖冬seo
祖冬seo · seo界吴彦祖 卫星：Xu03181616

我之前也是  

一、提交百度站长死链  百度会处理

二、自己删除

三、要想不再被抓取就到Robots里屏蔽

4 年前
IP属地：江苏
赞同 0 评论 0
收藏 举报
评论取消
Mr吴િ😜ી15859746111厦狮专线
Mr吴િ😜

LIVE意荐
0
ｒｏｂｏｔｓ屏蔽下啊，这样可以提升爬虫效率ｈｔｔｐ：／／ｗｗｗ．ｓｙｅｄｌ．ｃｏｍ／

4 年前
IP属地：福建
赞同 0 评论 0
收藏 举报
评论取消
阳子
阳子 · 企业网站建设，企业网站优化，单词排名，全站优化，快排

写进Robots文件

4 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
冷雨夜
冷雨夜 · 沈阳软件定制开发公司_OA办公系统_进销存软件_CRM系统

这样不好吧

4 年前
IP属地：辽宁
赞同 0 评论 0
收藏 举报
评论取消
数据线-厂家丨免费拿样质量保证
数据线-厂 · 全网最差SEO优化

别管他

4 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
头目
头目

可以忽略 假蜘蛛可能

4 年前
IP属地：海南
赞同 0 评论 0
收藏 举报
评论取消
17674648400
17674

写个Robots文件吧

4 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
圣考网
圣考网 · 圣考网QQ:363322014 微信：qqnba2 一起做友情链接all，互相把自己的权重拉起来吧

都是乱来的

4 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
遇见美好
遇见美好

恶意扫描，你使用nslookup查询是否百度蜘蛛就知道了

4 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
加载更多
搜外微信
提供服务
常用链接
产品实验室
©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司