求助!!!蜘蛛抓取异常的问题! 悬赏1元 已结束
同一个服务器上有2个网站:
a网站文章页链接格式:https://www.a。Com/post/1.html
b网站文章页链接格式:http://www.b。Com/news/1.html
a网站是新站,上线后蜘蛛来抓它内页的时候,抓的链接变成了:https://www.b。Com/post/1.html,这样,链接格式是对的,但是域名成了b网站的,关键是抓取状态有404也有200,这是什么情况?
15 人参与回答
最佳回答
1、同服务器,2个域名,蜘蛛抓取错误,可服务器提交工单看是否是解析出现问题或者其他服务器设置出现问题导致,请求专人处理;
2、百度站长抓取诊断,正常URL能否提交抓取成功,错误的也去提交下,报错更新抓取ip。
好奇怪,觉得推背蛙说的有道理
应该是服务器设置的问题吧
没遇到过,看推推蛙说的
应该是服务器哪里设置问题
同意楼上的观点