SEO
聚集100万网络营销实战家
建网站
换友链
百度蜘蛛大量访问我网站上不存在的页面，请问是否可以通过写robots.txt来禁止它访问？ - 搜外SEO问答
搜外网
>
搜外问答
>
问答页面
百度蜘蛛大量访问我网站上不存在的页面，请问是否可以通过写robots.txt来禁止它访问？
微信
追加问题
交换友情链接，就用搜外友链，方便！
1 人参与回答
延选人才网
·
诚人延选-延时喷剂哪个牌子好?口碑好的延时喷剂评测=================================
建议你看一下网站原文件，是否存在这些文件。蜘蛛访问过的
404
页面百度系统会自动剔除，这个不用担心
相关问题
百度蜘蛛只抓取网站首页 不抓内页是什么原因？
(1 个回答)
复制内容如何让搜索引擎快速收录呢？
(0 个回答)
百度蜘蛛不来网站怎么提高浏览量？
(2 个回答)
网站大量IP同时访问导致网站打不开，有好的解决办法吗
(2 个回答)
如何利用百度蜘蛛的来路IP来判断网站的权重？
(1 个回答)
百度蜘蛛抓取量为什么越来越少？
(4 个回答)
百度蜘蛛一天来你网站多少次才算不错？
(8 个回答)
百度蜘蛛长时间都没有来网站有哪些引导？
(3 个回答)
收录宝
xymww
xymww
xymww
zmone
×
悬赏问题
让更多人参与回答
给问题设置一定金额，将更容易获得关注与回答。
1元
路过一下
3元
意思一下
5元
了解一下
8元
支持一下
18元
有钱任性
88元
我是土豪
选择支付方式
微信支付
支付宝
余额支付
确认支付 →
×
追问
追问
