网站抓取异常

网站抓取异常,服务器错误:爬虫发起抓取,httpcode返回码是5XX,响应代码502是什么意思?需要怎么做,对网站的收录、流量有影响吗?我是新手,对这个不太懂啊,网站近半个月都有这个问题。请各位大神给个指导呀?

追加问题
关注问题 分享到微信 收藏
柳海 · 80后,SEO/SEM爱好者,V信:hai-world

既然知道服务器错误就要在网站和程序上找原因了。例如:网站程序处理数据库没考虑并发问题、服务器带宽问题等都可能会引起服务器错误。
一般的抓取错误多与网站架构及逻辑有关。