需要用到的第三方模块有： superagent superagent-charset （手动指定编码，解决GBK中文乱码） cheerio express async （并发控制） 完整的代码，可以在我的github中可以下载。主要的逻辑