利用Node.js批量抓取高清妹子图片实例教程


            前言

写了一个抓取图片的小玩意，分享一下。



Github地址：http://github.com/focalhot/node.js-crawler （本地下载）

示例代码





 //依赖模块

 var fs = require('fs');

 var request = require("request");

 var cheerio = require("cheerio");

 var mkdirp = require('mkdirp');

 

 //目标网址

 var url = 'http://me2-sex.lofter.com/tag/美女摄影?page=';

 

 //本地存储目录

 var dir = './images';

 

 //创建目录

 mkdirp(dir, function(err) {

 if(err){

 console.log(err);

 }

 });

 

 //发送请求

 request(url, function(error, response, body) {

 if(!error && response.statusCode == 200) {

 var $ = cheerio.load(body);

 $('.img img').each(function() {

 var src = $(this).attr('src');

 console.log('正在下载' + src);

 download(src, dir, Math.floor(Math.random()*100000) + src.substr(-4,4));

 console.log('下载完成');

 });

 }

 });

 

 //下载方法

 var download = function(url, dir, filename){

 request.head(url, function(err, res, body){

 request(url).pipe(fs.createWriteStream(dir + "/" + filename));

 });

 };



总结

以上就是这篇文章的全部内容了，希望本文的内容对大家的学习或者工作具有一定的参考学习价值，如果有疑问大家可以留言交流，谢谢大家对中文源码网的支持。