crawler 发表于 2018-07-30 更新于 2020-09-11 1. 比较成熟的框架 crawler4j heritrix nutch SpiderMan webmagic 2. Resource nutch heritrix webmagic webmagic git ptthon scrapy