//================================================
// https://www.meitulu.com图片批量下载Node.js爬虫1.01
// 2017年11月5日
//================================================// 内置http模块，提供了http服务器和客户端功能
var http=require("http");// cheerio模块，提供了类似jQuery的功能
var cheerio = require("cheerio");// 内置文件处理模块
var fs=require('fs');// 请求参数JSON
var options;// request请求
var req;//--------------------------------------
// 程序入口
//--------------------------------------
function start(){var folder="38";fs.mkdir('./'+folder,function(err){if(err){console.log("创建目录"+folder+"失败");}});var startIndex=1;var endIndex=104;for(var i=startIndex;i<=endIndex;i++){downloadPic(folder,i);}
}//--------------------------------------
// 下载图片
// folder:图片所在url的目录
// pinctureIndex:图片序号
//--------------------------------------
function downloadPic(folder,pinctureIndex){console.log("开始下载"+pinctureIndex);// 初始化optionsoptions={hostname:'mtl.ttsqgs.com',// 这里别加http://，否则会出现ENOTFOUND错误port:80,path:'/images/img/'+folder+'/'+pinctureIndex+'.jpg',// 子路径method:'GET',};req=http.request(options,function(resp){var imgData = "";resp.setEncoding("binary"); resp.on('data',function(chunk){imgData+=chunk;            });resp.on('end',function(){var fileName="./"+folder+"/"+pinctureIndex+".jpg";fs.writeFile(fileName, imgData, "binary", function(err){if(err){console.log("文件"+fileName+"下载失败.");}console.log(fileName+"下载成功");});    });});// 超时处理req.setTimeout(5000,function(){req.abort();});// 出错处理req.on('error',function(err){if(err.code=="ECONNRESET"){console.log('socket端口连接超时。');}else{console.log('请求发生错误，err.code:'+err.code);}});// 请求结束
    req.end();
}// 调用start函数，程序开始
start();