nodejs爬虫

爬虫的三种方式：

下面从1~3，使用场景从简单到复杂，开发成本逐渐升高，稳定性逐渐降低

 

功能强大的superagent，可以很方便的处理set-cookie进行会话保持：

github.com/visionmedia/superagent