现在有些网站没有列表，文章地址还类似于 4d55c920723eF70C.shtml 这样无规则，请问这样该怎么采集呢？？？就像头条，你不论怎么搜索，它不给你整个搜索数据，只给几十个就向下拉不动了 怎么才能采集呢？
上下篇也可以采集
除非是JS出来的列表没有办法！能在源代码看到的就有办法的！
现在很多网站的网页浏览方式都不一样。 但其实不管怎么展现，其底层逻辑都不会变的。 至于你想要弄清楚如何采集相关的网页， 这个就得看你用的是什么采集软件了， 然后，不同的采集软件，他们的官网都会提供各种复杂网页的采集教程的，你可以去看看
让更多人参与回答
