搜外网>搜外问答>问答页面

蜘蛛到访消耗服务器资源大嘛？ 悬赏1元 已结束

微信

蜘蛛到访也占据cpu，内存，带宽的资源吗，如果有的话，消耗资源大嘛？蜘蛛太多也会导致网站打不开的情况吗？ （就是有种情况，明明没多少搜索访客，配置看上去也够用，但是蜘蛛到访很多，但是就是经常网站打不开<排除其他问题的情况下>）

追加问题
网站打不开 举报 本帖由用户发布，如有侵权联系删除  2023-03-11 发布698 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    15 人参与回答
MR.Nobody
MR.No

除了流量站 其实大部分站都不影响

1 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
浅语
浅语

除了流量站 其实大部分站都不影响

1 年前
IP属地：江西
赞同 0 评论 0
收藏 举报
评论取消
lamp914
lamp9 · 擅长建站和推广，欢迎来撩

量大就有影响，量少基本没啥影响

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
F
F

蜘蛛抓取量大 频次高，会影响到服务器

1 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
照明设计
照明设计

看推推蛙说的

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
阿潘
阿潘 · 电信sd-wan服务商

有推推蛙的地方就有我在，跟着学习！

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
嘉友实业
嘉友实业

这个少吧，除非抓取量很大的

1 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
曾庆平
曾庆平 · SEO实战家（10年SEO经验操作百万uv多个）曾为土巴兔推广经理以及犀牛之星创始人。

一般蜘蛛抓取出现服务器崩溃的很少，基本上是采集的ip过多才会出现网站卡且容易服务器内存大，打开非常慢，建议直接在日志分析屏蔽相应的采集ip

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
丫丫
丫丫 · 唵嘛咪叭咪吽

所以数量多的话基本上就是被CC或DD攻击了

1 年前
IP属地：陕西
赞同 0 评论 0
收藏 举报
评论取消
简单收录网
简单收录网 · 来提交你的网站，免费做高权重免费外链

针对垃圾蜘蛛，可Robots文件disallow拒绝。

1 年前
IP属地：安徽
赞同 0 评论 0
收藏 举报
评论取消
怡合达YHD
怡合达YH · 怡合达专业从事自动化零部件研发、生产和销售,提供FA工厂自动化零部件一站式供应

蜘蛛抓取频次过高，抓取量太大是会影响到服务器稳定性的，如果希望不受影响可降低抓取频次

1 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
汪浩然
汪浩然 · 屌丝男

如果蜘蛛抓取频次多的话，也会占用服务器内存和cup的

1 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
海阔天空
海阔天空 · 315防伪标签办理中心-全国315产品防伪查询中心

如果蜘蛛抓取频次多的话，也会占用服务器内存和cup的

1 年前
IP属地：河南
赞同 0 评论 0
收藏 举报
评论取消
金榜
金榜

楼上分析的很对哦

1 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信：tuituiwaseo

1、蜘蛛抓取频次高，量大，也会影响到这些；
2、首先要判断，这个抓取的蜘蛛是什么蜘蛛，蜘蛛抓取频次，各大搜索引擎都可调整，如果不想抓取那么高，就调整下就好；
3、针对垃圾蜘蛛，可Robots文件disallow拒绝。

1 年前
IP属地：山西
赞同 0 评论 0
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
  • 文章大量纯采集，然后分类和tag的标题和描述用心做好。然后备案，这样能做出权重来吗？
  • 网站刚上线就开始收录了，不出词怎么办呢？而且域名显示2年啊 新买的
  • 计算机专业包括那些？
  • 想学电脑有什么推荐
  • 网站访问HTTPS认证好了，百度和谷歌流量应该会涨吧！
  • 一个域名下有300多个二级域名，那是不是相当于有300多个网站？
  • 蜘蛛到访量很多，是不是说明网站质量还行？
  • 泛域名导致网站被K列为低至站点，有相同情况的吗
  • 现在能做权5网站的SEO，月薪大概多少，好找高薪工作吗？
  • cn域名到期时间3月9号什么时候才能再注册？
    • SEO培训招生中
    189
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司