有个网站只有详情页,也没做分页,没法直接采集,就想着把百度快照地址采集下来,然后找到需要的网址
把我想说的都说了,进来学习一下
匿名用户
Sitemap里只有最近更新的,整个网站没有任何分页和列表
这么牛逼吗? 想拿百度做跳板吗? (你可以找目标网站的站点地图,查到它的列表页,既然它页面没做分页的入口,那百度肯定也是无法进入的,除非它提供了链接给百度,或者站点地图里面有链接。)
让更多人参与回答