有没有功能强大点的网站地图生成工具，最好能根据robots去爬URL的那种。很多链接不想放到网站地图了。
有没有好的网站工具推荐一下呢？
爱站工具包，
我直接用的爱站的，然后抓取之后再生成之前是可以手工删除不想要的链接，然后只把自己需要蜘蛛抓取的地址生成地图。
爱站工具包用的比较多
让更多人参与回答
