百度 site 某网站的链接,能用什么方法把这些链接全抓取过来吗?
好久Site和索引都没变化了,但是首页权重提高了
最近索引掉好多
应该是可以的,有啥用啊
最近索引掉好多,Site的也不高,心疼好几十秒
1、Site域名,抓取所有的收录,这个收录少还现实,收录多,百度展现的也都是76页,后面的也都是再次点击,site也不会展现那么多; 2、可能有方法,抓取,但是这样收集起来的意义是什么,如果看网站有无出词排名,5118、站长工具就能处理,site里面的收录也会有大量的无效索引收录。 ps:这样操作有无意义可以思考下,暂未听说有可以抓取爬行site整域的所有页面方法。
让更多人参与回答