接着这篇文章Node.js+jade抓取博客所有文章生成静态html文件的实例继续，在这篇文章中实现了采集与静态文件的生成，在实际的采集项目中， 应该是先入库再选择性的生成静态文件。
那么我选择的数据库是mongodb,为什么用这个数据库，
前言：最近想学习node.js,突然在网上看到基于node的爬虫制作教程，所以简单学习了一下，把这篇文章分享给同样初学node.js的朋友。
目标：爬取 http://tweixin.yueyishujia.com/webapp/build
本文将使用nodeJS实现一个简单的网页爬虫功能
网页源码
使用http.get()方法获取网页源码，以hao123网站的头条页面为例
http://tuijian.hao123.com/hotrankvar http = require(
前言
前端时间再回顾了一下node.js，于是顺势做了一个爬虫来加深自己对node的理解。 主要用的到是request，cheerio，async三个模块
request 用于请求地址和快速下载图片流。 https://github.com
今天想获取一大批猫的图片，然后就在360流浪器搜索框中输入 猫 ，然后点击图片。就看到了一大波猫的图片： http://image.so.com/iq=%E7%8... ，我在想啊，要是审查元素，一张张手动下载，多麻烦，所以打算写程序来实现
前言
说起写node爬虫的原因，真是羞羞呀。一天，和往常一样，晚上吃过饭便刷起知乎来，首页便是推荐的你见过最漂亮的女生长什么样？,点进去各种漂亮的妹纸爆照啊！！!,看的我好想把这些好看的妹纸照片都存下来啊！一张张点击保存，就在第18张得时候
信息采集是搜索引擎工作的重要环节，其中网络爬虫担当着很重要的任务。 今天，小小课堂SEO自学网带来的是《网络爬虫如何采集页面》。希望本次的SEO技术培训对大家有所帮助。
