为什么不能提供对某一URL目录下的所有连接进行爬取的功能?

类似flashget下载一个页面的所有连接一样,再加上多层就好了。

MetaSeeker是一个聚焦网络爬虫

抓取超链接的范围是受控的。如果抓取所有超链接,就不是聚焦网络爬虫了。聚焦网络爬虫和普通网络爬虫没有优劣之分。使用场合不同而已。