搜外网>搜外问答>问答页面

robots.txt协议

微信

https://www.hbsmts.com/plus/count.php?view=yes&aid=817&mid=1

这个链接如何用robots禁止蜘蛛抓取？

追加问题
Robots PHP 举报 本帖由用户发布，如有侵权联系删除  2020-08-20 发布682 次浏览
最新问题
 
广告位出租
广告位出租-排名优化
    8 人参与回答
三个六
三个六

把呢个链接直接加到Disallow后面

3 年前
IP属地：陕西
赞同 0 评论 0
收藏 举报
评论取消
132
132

Disallow就是禁止抓取的，找个其他网站参考一下就可以了。

3 年前
IP属地：河北
赞同 0 评论 0
收藏 举报
评论取消
晓迪
晓迪 · 鲜丰水果加盟

Disallow就是禁止抓取的，找个其他网站参考一下就可以了。

3 年前
IP属地：浙江
赞同 0 评论 0
收藏 举报
评论取消
ヾ壞孩紙ヾ
ヾ壞孩紙ヾ

不设置禁止抓取会比较好

3 年前
IP属地：广东
赞同 0 评论 0
收藏 举报
评论取消
94爱网赚论坛
94爱网赚 · 网络赚钱, 创业者, 薅羊毛, 兼职网, 资源分享, 网赚论坛

Disallow

3 年前
IP属地：江苏
赞同 0 评论 0
收藏 举报
评论取消
回复问答禁止带推广链接、违法词及灌水，违规将封禁账号！！了解合理带链接的方法
本贴交流超时，回复已关闭
  • 想问大佬一个问题，我们负责的一个网站每个月23号展现量都出新峰值，这是什么情况。找了很久没找到原因。
  • 快半个月了还是不收录
  • 外链平台是个永久不衰的话题啊
  • 请问大家seo按天计费系统有推荐的吗？最好对接5118接口的？
  • 全文搜索引擎一般采用什么原理来采集信息
  • 网站被k怎么恢复快快速恢复？
  • 网站上线十多天了百度一直未收录里面的连接怎么办？
  • 网站友链交换方式有哪些可以交换？
  • 百度又出问题了，以为只是我站的百度评价栏打不开
  • SEM竞价和SEO优化的不同点都哪些？
    • SEO培训招生中
    190
    搜外微信
    提供服务
    常用链接
    产品实验室
    ©2008-2024 SEOWHY 深圳市夫唯伙伴信息咨询有限公司