搜外网>搜外问答>问答页面

wordpress的蜘蛛爬虫记录都是抓取chineseurl.php,而且很多404 推荐热议 悬赏8元 已结束

<p>如标题所示,网站是wordpress系统,使用chineseurl.php进行url伪静态处理。</p><p>看了日志记录,基本都是在抓取chineseurl.php这个文件,而且状态码很多404,也有200,请问这个有影响吗?有的话如何解决。谢谢!</p><p>在百度站长工具里面看“抓取异常”,基本正常,没有什么错误。</p><p>网站是<a href="http://www.easysofts.com.cn" target="_blank" data-url="www.easysofts.com.cn" class="show-5118-data" rel="nofollow">http://www.easysofts.com.cn</a></p><p><br></p>

追加问题
    15 人参与回答
最佳回答
奋斗
奋斗 · 睁眼看世界
less is more 等 1 人赞同该回答

站长工具里面看“抓取异常”,基本正常,没有什么错误。  那就没问题。一切以百度认为的为准,百度都觉得正常了,你还担心什么。

还有,日志里面的蜘蛛,一点参考价值都没有,很多都是假的。

张晓雷
张晓雷 · 十年电商从业经验,擅长电商运营和团队管理,精通淘宝直通车

感觉完全不用关注这方面

全本小说
全本小说 · 有声小说在线收听网 www,655228,com

影响不大 坚持下去

首先你要去确定这个404页面的是否是真正的百度蜘蛛,现在有很多IP伪装成百度蜘蛛前来抓取网站。比如我网站每天就会有很多这种假蜘蛛。

栗国杰
栗国杰 · 从事seo行业五年了

有影响的,还是屏蔽掉吧

WordPress程序为什么不用伪静态规则,多简单的事。有个老帖https://ask.seowhy.com/question/9152

曾庆平
曾庆平 · SEO实战家(10年SEO经验操作百万uv多个)曾为土巴兔推广经理以及犀牛之星创始人。

如果是没有实质性的内容的URL路径,建议直接屏蔽抓取就行。一般影响不大。

常州优化
常州优化 · 「常州SEOer-吴健康」擅长单词优化-整站优化-多年钻研企业站点SEO

屏蔽就好了

刘振勇
刘振勇 · wsjpg纹身图案

是有影响的,百度对一个网站派去的蜘蛛是有限度的,这些蜘蛛抓取了这些404页面,相对的抓取正常内容页的机会就会减少,会影响收录。用Robots屏蔽掉就可以了。

梦一样
梦一样 · 社区网站可发外链,需注册!

影响不大的

崔家大院
崔家大院 · 网站诊断、建站、快速排名

可以用 Robots 屏蔽一些没有必要的404,然后,做好404页面

最怕的是有死链接

施先生
施先生 · 资深的SEO/SEM工作者和管理者

你这个页面自己测试下 我进去这个页面是无法打开的。那就是一个死链接了。如果没多大影响可以删除。

卅
· 权重5网站目录,蜘蛛多,欢迎s我提交

<p>把404页面到百度站长平台提交一下就行,问题不大,这个文件打开是404,所以也一并提交吧。有些是404,然而你站内是没有的就可以用Robots屏蔽一下。</p><p><br></p>

可以不用管的,因为404也是页面

SEO培训招生中
189