搜外网>搜外问答>问答页面

求助，Robots没有屏蔽但是站长平台抓取测试提示屏蔽悬赏3元已结束

微信

<p>内页明明没有设置robots屏蔽，但是就是模拟抓取显示robots屏蔽，主页可以正常抓取，</p><p></p>

Robots 站长平台举报 本帖由用户发布，如有侵权联系删除 2023-12-14 发布1,012 次浏览

7 人参与回答

艾克SEO · ⚫新站快收⚫K站恢复 ⚫网站建设外贸商城小程序 ⚫SEO优化诊断托管运营 ⚫QQ/微信：97358052

网站建设等 1 人赞同该回答

把Robots文件贴出来看看，就知道了！
谁知道你有没有写错协议呢

罗凌峰

刘上仙等 1 人赞同该回答

Robots文件里面没写封禁，如果一直如此，不妨去申诉反馈，看是否平台自身出现问题

推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信：tuituiwaseo

罗凌峰等 1 人赞同该回答

1、检查Robots文件里面是否有屏蔽，没屏蔽无影响；

2、robots的那个也能去检测是否屏蔽，去百度站长robots那边去检测下，看是否红字显示已封禁；

3、如果robots哪里显示没封禁，那就没问题，如果显示封禁了，那尝试，将robots文件复制出来，暂且删除下，在抓取下，看是否正常。

以你Robots文件为准

端木.

已经好了各位老哥，可能是有延时吧

丫丫 · 唵嘛咪叭咪吽

有没有可能内页所在的文件夹在Robots规则中被Disallow了？

收录宝