Nodejs 爬取小姐姐图片
学习没有动力，那吃枣是?的，学习 nodejs 的过程中，我来给大家一点提神醒脑的?
这里我是用了 cnodejs社区 最简单的爬虫小教程做基础改鳝，完成的
//初始化项目
npm init
//启动 app.js
node app.js
//你就可以愉♂快的玩耍了（代码见文章末尾）如不知道如何使用 nodejs
Linux玩家可以看 我的这篇文章；Windows玩家可以直接去官网下载 .msi ，下一步下一步安装 直达车
基本的爬取思路
- 页面的分页按钮，抓到在此页出现的所有小姐姐的页面链接，存储下来
- 使用 eventproxy 来并发访问每个小姐姐的页面
- 访问的过程中，使用 cheerio(类似jquery的模块) 来匹配我们需要的图片地址 ，记录找到的所有图片地址
- http 去请求每张图片地址，保存二进制数据流
- fs将二进制数据流，输出成图片文件，文件名从原始地址提取出来
- 保存至 文件夹
这里我怕由于请求过于庞大，使用 express 构建静态页面提供 查询 和 下载，降低爬取的站点被爬死的可能性
下载地址：xjj.zip
异曲同工之妙
妙呀妙呀
node.js还是太高深了呢。。
改鳝…
测试评论