搜外网>搜外问答>问答页面

百度蜘蛛大量访问我网站上不存在的页面，请问是否可以通过写robots.txt来禁止它访问？

微信
追加问题
Robots 百度蜘蛛 举报 本帖由用户发布，如有侵权联系删除  2024-01-11 发布1,047 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    1 人参与回答
公号「诚人延选」
公号「诚人 · 诚人延选-延时喷剂哪个牌子好?口碑好的延时喷剂评测=================================

建议你看一下网站原文件，是否存在这些文件。蜘蛛访问过的404页面百度系统会自动剔除，这个不用担心

3 个月前
IP属地：重庆
赞同 0 评论 0
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
  • 网站有死链，已经向百度提交了，多久会删除？蜘蛛还会抓吗
  • 蜘蛛池的原理是什么？
  • 如何选择合适的关键词进行优化，以获得更好的搜索排名？
  • 怎么发现蜘蛛是通过外链来的还是历史访问痕迹来的？
  • 在哪些情况下需要进行更详细的价值流分析？
  • 询盘信息怎么知道销售成交没？
  • 如何在微信公众平台中解决域名与后台配置不一致的问题？
  • 搜外6系统支持if else标签吗？
  • 企业的网站被针对性地刷百度统计垃圾广告怎样解决？
  • 如何在PHP语言开发中避免API访问结果的成功与失败问题？
    • SEO培训招生中
    189
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司