搜外网>搜外问答>问答页面

百度蜘蛛为什么抓取根目录的文件地址

微信

百度蜘蛛为什么抓取根目录的文件地址

追加问题
根目录 百度蜘蛛 举报 本帖由用户发布，如有侵权联系删除  2021-10-12 发布591 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    4 人参与回答
三九问答
三九问答 · 专业的有问必答平台

Robots文件里禁止他抓取就可以了

3 年前
IP属地：湖北
赞同 0 评论 0
收藏 举报
评论取消
SEO小枫
SEO小枫

先检查一下网站下面的.htaccess配置规则，再看看网站的Robots.txt文件是不是需要调整。

3 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消
物美价廉
物美价廉 · 专业的建筑木方生产厂家、规格齐全还可单独定制！

因为蜘蛛喜欢你啊

3 年前
IP属地：重庆
赞同 0 评论 0
收藏 举报
评论取消
MEMORY
MEMOR · 德国温克豪斯门窗五金配件

你可以在Robots文件里禁止他抓取

3 年前
IP属地：黑龙江
赞同 0 评论 0
收藏 举报
评论取消
搜外微信
提供服务
常用链接
产品实验室
©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司