<p>响应代码是500,首页可以抓取,其他页面抓取失败,是什么原因呀?有没有大佬知道要怎么处理?</p>
1、具体网站诊断分析下;
2、5xx返回码是服务器空间不稳定;
3、可以用在线查网页返回码工具查看下,自己点击内页URL是否能正常访问可打开,蜘蛛模拟抓取爬行看看是否能抓取到;
看起来应该是服务有问题,解决一下
URL是不是填写错误
大概率是服务器的问题
偶尔出现这情况的话就得问问服务商了,是不是线路有问题
那么就有可能是服务器的问题了 需要检查一下服务器
让更多人参与回答