搜外网>搜外问答>问答页面

百度站长抓取诊断显示失败 状态码200 无法抓取到具体内容 悬赏1元 已结束

<p>网址:<a href="https://www.qlightcn.com/cn/board/news/page/17/" target="_blank" data-url="www.qlightcn.com" class="show-5118-data" rel="nofollow">https://www.qlightcn.com/cn/board/news/page/17/</a><br><br><br></p><p><br></p><p>同一个站点:<br><a href="https://www.qlightcn.com/cn/sitemap.xml" target="_blank" data-url="www.qlightcn.com" class="show-5118-data" rel="nofollow">https://www.qlightcn.com/cn/sitemap.xml</a><br><a href="https://www.qlightcn.com/_widgets/pdfv/web/viewer.php?prfurl=/productdata/productfiles/107/cn/catalog_107.pdf&nm=SWT" target="_blank" data-url="www.qlightcn.com" class="show-5118-data" rel="nofollow">https://www.qlightcn.com/_widgets/pdfv/web/viewer.php?prfurl=/productdata/productfiles/107/cn/catalog_107.pdf&nm=SWT</a><br>除以上两类网址可以正常抓取外,其他页面一律报错。</p><p>尝试的解决方案:使用了几乎国内所有CDN都测试了一遍,最后只有百度的云加速生效后可以正常抓取。但最近百度云加速会自动把百度爬虫的抓取回源地址,导致百度无法抓取。</p>

追加问题
    10 人参与回答
推推蛙
推推蛙 · 擅长SEOSEM爱采购诊断、方案编写、优化运维。微信:tuituiwaseo
SunShine 等 1 人赞同该回答

1、我这边使用蜘蛛模拟抓取网页,可正常抓取和识别里面的内容;

2、百度站长抓取诊断失败,返回码是200可以百度站长反馈申诉下,看是站长工具问题还是网站页面问题;



服务器的问题,找主机提供商解决

服务器的问题吧,这个需要咨询主机或者服务器供应商

大家都一样的,无视即可

大地旅人
大地旅人 · 一个热爱美食&amp;amp;amp;且喜欢旅游的网站行业工作者&amp;amp;amp;当然佛系#

直接去百度申诉,不要墨迹,一定于要快

1、蜘蛛模拟抓取网页,可正常抓取和识别内容;

2、百度站长抓取诊断失败,返回码是200向百度站长反馈申诉,确定站长工具问题还是网站页面问题;

创业项目
创业项目 · 免费分享自媒体,抖音带货,闲鱼,seo,短视频,剪切视频等一系列课程

只有一直向百度申诉了

看看大神们的回复

滴答滴答
滴答滴答 · 冷却塔厂家特菱空调交换友链ing~~~

好复杂啊你这个链接~~

我是 DNS无法解析IP 也不知道怎么弄