搜外网>搜外问答>问答页面

最新网站降权,robots.txt也抓取不了

最新网站降权,robots.txt也抓取不了,用百度云的服务器就是抓取不了,但是用阿里云的却可以,我线上给百度站长提供了解决需求也不解决。

下面是我的反馈案例:

你好,我的robots 线上可以正常访问的,地址:http://www.1stdy.com/但是通过百度站长平台的工具却没办法访问和读取,不知道是什么情况,请麻烦处理一下,谢谢。 网站的首页和内容,蜘蛛都是可以正常访问的,但是只有robots.txt却没办法读取

我的回复:

你好,我的robots 线上可以正常访问的,地址:http://www.1stdy.com/robots.txt 但是通过百度站长平台的工具却没办法访问和读取,不知道是什么情况,请麻烦处理一下,谢谢。 网站的首页和内容,蜘蛛都是可以正常访问的,但是只有robots.txt却没办法读取

2019-09-13 11:23:26

搜索资源平台回复:

您好,建议您检查网站服务器设置,然后在百度搜索资源平台使用robots工具进行手动更新。robots工具更新操作完成后,预计3天后线上生效,届时请重新进行检测诊断,若诊断后还有问题,提供问题截图和具体URL,以便追查;详情请参考《robots.txt文件用法举例》:https://ziyuan.baidu.com/college/courseinfo?id=267&page=12#h2_article_title29,感谢您对百度的关注和支持!

2019-09-14 17:52:59

我的回复:

2019-09-14 17:59:04

我的回复:

是这种提示,请麻烦解决一下,这是什么情况。

2019-09-14 17:59:04

搜索资源平台回复:

您好, 您的问题已转相关工作人员分析处理,请耐心等待下,感谢您的反馈!

2019-09-16 15:10:35

我的回复:

您好,您的反馈相关工作人员已处理(温馨提示:若您对处理结果有疑问,可继续反馈,工作人员会持续跟进,感谢您的支持与理解)

2019-09-19 12:03:39


追加问题
    6 人参与回答
搜外用户
搜外用户 · 来搜外学习的一名普通用户

不知道什么情况,不太懂

al
al · 网站专业找茬

Robots不是告诉百度什么可以抓取什么不要抓取的吗?

不太懂,学习下

程东
程东 · 免费注册公司就找云算账

看下百度白皮书吧

工商财税
工商财税 · 深圳代理记账、深圳注册公司 400-778-0826

不知道什么情况

儒商阿杰
儒商阿杰 · 网站源码,网站搭建-专注网络优质资源

太垃圾了