访问被拒绝:爬虫发起抓取,httpcode返回码是403 网站不收录,快照不更新

网站www.sfydp.com 帮我看下,返回码是403

找不到页面:爬虫发起抓取,httpcode返回码是404

QQ截图20190326082533

请老师们帮我看下这个问题怎么处理

追加问题
    3 人参与回答

可能是你的服务器设置了权限

家教
家教 · 专业深圳家教网,专业推荐教师服务,快速预约教师学生,长期招教员,长年努力提供优质的家教。

学习

无限网赚
无限网赚 · 左边是我的网站名,百度搜索支持一波!

Robots填写错误?具体发出来里面的内容看看,才能明白什么问题.