搜外网>搜外问答>问答页面

关于爬虫对DIV层,以及JS代码抓取(懂得大神进来,谢谢) 悬赏18元 已结束

1,爬虫能不能抓取div层?

2,js代码调用一个div层,爬虫能不能抓取JS代码,然后爬取到这个div层?

3,加密的js代码调用一个div层,爬虫能不能爬取到这个div层?

4,如果我用第二个div层覆盖第一个div层,那么有什么法子可以让第二个div层不被爬虫发现,如果加密第二个div层行不行?

5,如果一个div层1嵌套在另一个div层2外面,爬虫没有抓取到div层1,是不是爬虫就认为div2层没有div层1在外面?

6,a页面用js代码调用另一个页面b,爬虫能不能抓取a页面的js代码,然后抓取另一个页面b?

7,a页面用加密后的js代码调用另一个页面b,爬虫能不能抓取a页面的加密js代码,然后抓取另一个页面b?


谢谢

追加问题
    17 人参与回答
崔家大院
崔家大院 · 网站诊断、建站、快速排名
等风 等 1 人赞同该回答

第一个:可以的

第二个:可以抓去 百度自己说可以抓去JS了 但是现在谁也没有证实

第三个:这个可以看看百度快照里面  按理说抓去不到

第四个:一般不被抓去 就是应用js或框架

第五点:是的

第六点:这个一般不会,以锚文本的形式可以

第七点:不能

想不想让百度抓去可以用Robots屏蔽 但是你屏蔽掉也会抓去 这就是百度

奋斗小青年 等 1 人赞同该回答

网站JS用多了,对优化不好,最好不要使用js,能不使用就不使用

路人
路人 · seo小学生
稀里糊涂seo 等 1 人赞同该回答

正常来说你没有Robots了的蜘蛛都能爬你服务器所有目录,而你说的同一个JS文件中对div的调用这个问题,蜘蛛是不会知道你调用不调用的,不过如果你想特别让蜘蛛爬哪个文件的哪个段落的js代码,你可以特别设置一个Js让蜘蛛去爬,不想让蜘蛛爬的就robots掉

学到了

PS
PS · Google SEO专家-Shuke.→SEO服务咨询微信:15877060841

可以的,这个当然没问题

玩转优化
玩转优化 · 举报网站,请到网信办网站。

你可以用静态页面啊,那样多好。你可以参考一下汶上锈石网站   

渣渣杨
渣渣杨 · 二营长建站优化wanhao_ya

这个不知道 自己测试一下撒 

步进电机

崔~
崔~ · 高质量发布企业信息-网站锚文本链接发布-点右边自己发

蜘蛛是看不懂代码的,只要你写他就会爬,不加限制的情况先,根目录下面及子目录都会抓爬,如有想限制的直接Robots掉,代码结构上多注重tdk、H标签、p、b标签等的使用。

我的想法和他一样,娃哈哈

第一个:可以的

第二个:可以抓去 百度自己说可以抓去JS了 但是现在谁也没有证实

第三个:这个可以看看百度快照里面  按理说抓去不到

第四个:一般不被抓去 就是应用js或框架

第五点:是的

第六点:这个一般不会,以锚文本的形式可以

第七点:不能

左左渔
左左渔 · 专注“科技项目申报”体系

JS页面是能被抓取的,但是对百度蜘蛛不太友好,基本很难抓取到,最好不要使用

坐等专业大神回答!

六千里
六千里 · 雅思、托福、Sat、GRE等出国留学语言培训。

学一波

郑州宝胜
郑州宝胜 · 主营阿迪达斯耐克折扣店加盟业务

学习了。

学习了

学习

加载更多