基于Node.js的强大爬虫 能直接发布抓取的文章哦

一、环境配置 1)搞一台服务器,什么linux都行,我用的是CentOS 6.5; 2)装个mysql数据库,5.5或5.6均可,图省事可以直接用lnmp或lamp来装,回头还能直接在浏览器看日志; 3)先安个node.js环境,我用的是0.12.7,更靠后的版本没试过; 4)执行npm -g install forever,安装forever好让爬虫在后台跑; 5)把所有代码整到本地(整=git clone); 6)在项目目录下执行npm install安装依赖库; 7)在项目目录下创建json和avatar两个空文件夹; 8)建立一个空mysql数据库和一个有完整权限的用户,先后执行代码