3 人参与回答

同意楼上的说法

三九问答
三九问答 · 专业的有问必答平台

那说明你的站点很OK啊,刚开始就有蜘蛛

新站点凌晨零点四十分上线的,从零点五十分开始抓取内页,一直到上午十点,抓了1040次内页,然后就没抓取了。