搜外网>搜外问答>问答页面

js爬虫如何实现网页数据抓取？

微信

JS 举报 本帖由用户发布，如有侵权联系删除 2023-04-04 发布758 次浏览

交换友情链接，就用搜外友链，方便！

6 人参与回答

奋斗只为优

这样抓取不了的

利美医疗 · 四川利美医疗是一家集一次性口罩、口罩辅料、清洁防护用品的研发、设计、生产、销售为一体的高新技术企业!

搜索引擎好像不会抓取JS 代码

天行健咨询 · 精益生产管理与六西格玛管理咨询，培训机构

s抓取网页数据主要思路和原理

在根节点document中监听所有需要抓取的事件

在元素事件传递中，捕获阶段获取事件信息，进行埋点

通过getBoundingClientRect() 方法可获取元素的大小和位置

通过stopPropagation() 方法禁止事件继续传递，控制触发元素事件

在冒泡阶段获取数据，保存数据

通过settimeout异步执行数据统计获取，避免影响页面原有内容