网站地图抓取出现大量403，空间商如此回复！！！ 悬赏3元 已结束
<p>网站本来有200多个页面，无论是用站长工具、爱站工具、金花工具、现在抓取到的都不到100页面，很多都提示403，而这个情况是最近几个月才有的，之前都是正常的，这个是什么原因引起的？<br></p><p><br></p><p><br></p><p><br></p><p>网站本来有200多个页面，无论是用站长工具、爱站工具、金花工具、现在抓取到的都不到100页面，很多都提示403，而这个情况是最近几个月才有的，之前都是正常的，这个是什么原因引起的？</p><p><br></p>
9 人参与回答
设置没做好
别人已经给了你专业的回答了啊，这回答一点毛病也没有，就是你目前的情况
1、你的站点是200URL
2、现在抓取页面100URL，大多是403返回码
3、你的意思是网页不能正常打开，服务商说是防止cc攻击，启用保护机制
4、你是用什么抓取，还有设置频率如何，对否自己多次同一ip访问站点也会导致页面无法打开
5、如果是访问量过大，处于保护会拦截几分钟返回403，这个也属于正常，只要在大部分时间内网页是正常就好
6、看网站日志看看这个403出现在那个时间段，你访问站点是否正常打开
网站设置问题
人家说的没毛病
他不是说了吗，cc抓取频率过高造成的，换一个工具试试呢
