如何在部署到 Heroku 的 Node.js 环境中创建 Redis（公牛）队列？

Question

我浏览了所有文档，但在找到正确实现的示例时遇到了一些麻烦。 首先，我有 Heroku Redis 附加组件，如下所示：

https://i.stack.imgur.com/9kcXW.png

我将 Redis 和 Bull 安装到我的 Node.js 环境并设置 Redis 如下：

const redis = require('redis');
const Queue = require('bull');
const redisClient = redis.createClient(process.env.REDIS_URL, {
    tls: {
        rejectUnauthorized: false
    }
});
const bullQueue = new Queue('queue', process.env.REDIS_URL)

我正在尝试将以下 function 作为后台任务运行（这是 Heroku 对于需要超过 0.5 秒才能完成的功能的建议）：

app.post('/', async function(request, response) {
  const client = await pool.connect() //pool is just a node-postgres pool
  try {
    await client.query('BEGIN')
    let data = await function1(argumentList);
    await function2(data);
    await client.query('COMMIT')
  } catch(err) {
    await client.query('ROLLBACK')
    console.log(err)
  }
  try {
    await client.query('BEGIN')
    const setOfItems = await function3()
    var array = []
    for (item of setOfItems) {
      if (conditional) {
        array.push(item)
      }
    }
    await client.query('COMMIT')
    let job = await bullQueue.add()
    response.send(JSON.stringify(array))
  } catch(err) {
    await client.query('ROLLBACK')
    console.log(err)
  }
});

这个 function 做了一些 web 抓取、数据库调用和其他事情，所以就像我说的需要几秒钟才能完成。 我应该如何更改我的 function 以将请求添加到后台队列，然后将 JSON.stringified 'array' 返回给用户。 抱歉，如果这是一个菜鸟 Redis 问题，但我查看了所有文档，我真的不知道如何继续。

Answer 1

对于初学者， const redis = require('redis'); 没有必要。 Bull 在引擎盖下连接到 Redis，因此您只需为 Heroku 提供process.env.REDIS_URL即可。 （ heroku config | grep REDIS如果需要，将返回端点 URL）

目前，您的所有数据库代码都没有委托给任务队列。 尝试注册与队列关联的处理 function 使用

bullQueue.process(job => {/* your database work goes here */})

参数job需要填充您的工作人员完成其工作所需的任何可序列化数据。 您使用填充此参数

bullQueue.add(/* job data goes here */)

高级方法可能类似于：

const Queue = require('bull');
const bullQueue = new Queue('queue', process.env.REDIS_URL)

bullQueue.process(async job => {
  console.log(job.data.argumentList);

  /* do SQL stuff */
  
  return [1, 2, 3, 4];
});

app.post('/', async (request, response) => {
  const job = await bullQueue.add({argumentList: ['some', 'data']});
  const array = await job.finished();
  response.send(JSON.stringify(array))
});

存在许多其他策略来获得结果。 有关一些想法，请参阅返回工作完成。

也可以看看：

• Queue#process
• Queue#add
• 如何在公牛队列中收听已完成的事件 - 仅针对当前工作。