是不是网站的链接结构不合理
url规划好没的
试试加Sitemap文件
Nofollow,可能是陷入了蜘蛛陷阱,调整一下内链的模块和抓取入口
可以尝试将蜘蛛引导到其他页面上试一试。
不会是是陷入死循环了吧
是不是网站的链接结构不合理?
可以制作面包屑导航,来尝试解决
让更多人参与回答