wordpress的蜘蛛爬虫记录都是抓取chineseurl.php，而且很多404 推荐热议 悬赏8元 已结束
<p>如标题所示，网站是wordpress系统，使用chineseurl.php进行url伪静态处理。</p><p>看了日志记录，基本都是在抓取chineseurl.php这个文件，而且状态码很多404，也有200，请问这个有影响吗？有的话如何解决。谢谢！</p><p>在百度站长工具里面看“抓取异常”，基本正常，没有什么错误。</p><p>网站是<a href="http://www.easysofts.com.cn" target="_blank" data-url="www.easysofts.com.cn" class="show-5118-data" rel="nofollow">http://www.easysofts.com.cn</a></p><p><br></p>
15 人参与回答
最佳回答
less is more 等 1 人赞同该回答
感觉完全不用关注这方面
影响不大 坚持下去
有影响的，还是屏蔽掉吧
如果是没有实质性的内容的URL路径，建议直接屏蔽抓取就行。一般影响不大。
屏蔽就好了
影响不大的
