为什么现在蜘蛛只抓网站的首页,十来天内页一个也没有呢?
有没有相同的情况?<a href="http://www.bz211.com/list/?5_1.html[?]">瓦楞纸箱<a>
将内页放在首页展示一段时间
首先解决一个问题,怎么知道“百度蜘蛛只爬网站首页不爬内页”?
蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。
神马?看不懂IIS日志?
优质案例,
才10天就别着急吧
才10天着什么急
可能还没放出来呢
让更多人参与回答