繁体   English   中英

async.series和async.each不能按预期工作

[英]async.series and async.each not working as expected

我正在尝试使用nodeJS构建一个Web抓取工具,该工具在网站的HTML中搜索图像,缓存图像源URL,然后搜索最大尺寸的URL。

我遇到的问题是,在循环通过图像源URL的数组以获取其文件大小之前,正在触发deliverLargestImage() 我试图同时使用async.seriesasync.each来使其正常工作。

如何强制deliverLargestImage()等到async.eachgetFileSizes()完成?

JS

var async, request, cheerio, gm;
async = require('async');
request = require('request');
cheerio = require('cheerio');
gm = require('gm').subClass({ imageMagick: true });

function imageScraper () {
  var imgSources, largestImage;
  imgSources = [];
  largestImage = {
    url: '',
    size: 0
  };

  async.series([
    function getImageUrls (callback) {
      request('http://www.example.com/', function (error, response, html) {
        if (!error && response.statusCode === 200) {
          var $ = cheerio.load(html);
          $('img').each(function (i, elem) {
            if ( $(this).attr('src').indexOf('http://') > -1 ) {
              var src = $(this).attr('src');
              imgSources.push(src);
            }
          });
        }
        callback();
      });
    },
    function getFileSizes (callback) {
      async.each(imgSources, function (img, _callback) {
        gm(img).filesize(function (err, value) {
          checkSize(img, value);
          _callback();
        });
      });
      callback();
    },
    function deliverLargestImage (callback) {
      callback();
      return largestImage;
    }
  ]);

  function checkSize (imgUrl, value) {
    var r, raw;
    if (value !== undefined) {
      r = /\d+/;
      raw = value.match(r)[0];
      if (raw >= largestImage.size) {
        largestImage.url = imgUrl;
        largestImage.size = raw;
      }
    }
  }
}

imageScraper();

尝试在此处移动callback()

function getFileSizes (callback) {
  async.each(imgSources, function (img, _callback) {
    gm(img).filesize(function (err, value) {
      checkSize(img, value);
      _callback();
    });
  }, function(err){ callback(err); }); /* <-- put here */
  /* callback(); <-- wrong here */
},

each元素each接受一个回调作为第三个参数 ,当每个元素的内部循环完成时将执行该回调:

参数

  • arr要迭代的数组。
  • iterator(item, callback) -一个应用于arr每个项目的函数。 迭代器传递了一个callback(err) ,完成后必须调用该callback(err) 如果没有发生错误,则应在不使用参数或使用显式null参数的情况下运行callback
  • callback(err) -所有iterator函数完成或发生错误时调用的回调。

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM