搜外网>搜外问答>问答页面

问下哪位高手知道为嘛搜狗蜘蛛只抓取首页和robots就没后续了呢

微信
追加问题
Robots 搜狗
本帖由用户发布，如有侵权联系删除  2019-11-19 发布1,675 次浏览
举报
其他问题
 
    2 人参与回答
用户159591

我的也是..不来抓取内页的了。。

6 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
用户143027 · 教育类站长一枚

你的Robots禁止搜狗蜘蛛爬取内页吗

6 年前
IP属地：上海
赞同 0 评论 0
收藏 举报
评论取消

收录宝

/5929 /4781 /6263 /2034 om/ta /1311 /4418 om/ta om/ta /2021 st_10 om/ta /5555 /6645 /4518 /1079 /6276 /6358 /5092 s/122

蜘蛛池

搜外微信
提供服务
常用链接
产品实验室
©2008-2025 SEOWHY 深圳市夫唯伙伴信息咨询有限公司