<p>如图：</p><p></p><p><br></p><p><br></p><p>发现查看分析日记有很多这种网站，打开是一些代码，请问需要处理吗</p><p>www.js-teacher.cn</p>
不要太相信网站日志的内容，不是百分百准确，有假蜘蛛的，不放心就去把robot好好写写，屏蔽掉看不懂的，或者直接允许看得懂的。
你看看你的链接，他是一个页面链接吗？这种会爬，但绝对不会抓。放心就好。
要就死链处理
让更多人参与回答
