搜外网>搜外问答>问答页面

之前有几个页面抓取返回状态码为500

之前有几个页面抓取返回状态码为500,后面修改好了,做了500错误页面,但每天观察网站日志,发现蜘蛛总是抓取这个页面,一直返回500,如何才能让他不抓取这些页面

追加问题
    1 人参与回答
SEO培训招生中
161