Задержка в цикле for для http-запроса

Question

Я только начинаю с JS и Node.js. Я пытаюсь построить простой скребок в качестве первого проекта, используя Node.js и некоторые модули, такие как request а также cheerio, Я хотел бы добавить задержку в 5 секунд между каждым запросом http для каждого домена, содержащегося в массиве. Можете ли вы объяснить мне, как это сделать?

Вот мой код:

var request = require('request');

var arr = [ "http://allrecipes.com/", "http://www.gossip.fr/" ];

for(var i=0; i < arr.length; i++) {
    request(arr[i], function (error, response, body){
        console.log('error:', error);
        console.log('statusCode:', response && response.statusCode);
        console.log('body:', body);
    });
}

Answer 1

Использование setTimeout:

var request = require('request');
var arr = ["http://allrecipes.com/", "http://www.gossip.fr/" ];

for (var i = 0; i < arr.length; i++) {
    setTimeout(request, 5000 * i, arr[i], function (error, response, body){
        console.log('error:', error);
        console.log('statusCode:', response && response.statusCode);
        console.log('body:', body);
    });
}

Вы в основном делаете цикл и говорите, что request метод должен вызываться с задержкой, равной 5000 * i, что на 5000 мс, умноженное на i, поэтому он будет увеличиваться на 5 секунд для каждой итерации цикла. Затем вы предоставляете все аргументы, которые будут переданы функции.

Answer 2

Любой, кто ищет яркий ответ ES6+ Promises и Async/Await, может использовать это.

Мы используем request-native-promises Вот.

const rp = require("request-promise-native");
const productID = [0,1,2,3,4,5,6]

//here we make our timeout synchronous using Promises
function sleep(ms) {
  return new Promise(resolve => setTimeout(resolve, ms));
}

//run your code in an async block
async function demo() {
  for (let i = 0; i < productID.length; i++) {
    const options = {
      method: "GET",
      url: `https://link_to_your_api/productID[i]`,
      json: true,
    };
    const body = await rp(options);
    console.log(`Awaiting 1s ...`);
    //waiting before sleep function executes using it synchronously
    await sleep(1000);
  }
}
demo();

//since I haven't done any error handling
process.on("unhandledRejection", err => {
  console.log("Unhandled rejection:", err.message);
});