Node.js Google PubSub 订阅者未收到某些消息

Question

概括：

我的Node.js应用程序中有一个聊天功能，并希望通过 socket.io 向客户端发送消息。 我通过 PubSub 触发向客户端发送。 现在，当运行 PubSub Subscription 时，大约 70% 的情况下一切正常（即打印出消息），但有时会停止而不做任何事情（特别是它也不会打印出错误）。 我可以确认丢失的 30%（消息）正在发布到主题，因为对同一主题的不同订阅会收到消息。

任何有关调试的帮助将不胜感激。

细节

这是我的堆栈：

• Node.js
• socket.io
• express.js
• 护照.js
• MongoDB
• 反应.js

过程：

• Anna在聊天中发送消息（这会写入数据库并发布到 PubSub 主题“消息”）
• Node.js express 应用程序运行订阅，然后根据消息内容发送给其他应该接收消息的人。
• 在这种情况下，与 Anna 在同一频道上的BoB会收到消息。

为什么我不直接从 Anna 发射到 Bob？ 原因是我想在消息之间有一个 AppEngine 并可能在那里添加一些逻辑，这似乎是一个好方法。

订阅

const pubSubClient = require('./client');

const errorHandler = function(error) {
    console.error(`ERROR: ${error}`);
    throw error;
};

module.exports = listenForMessages =(subscriptionName="messageReceiver",io) => {
    const subscription = pubSubClient.subscription(subscriptionName);

    // Listen for new messages until timeout is hit
    subscription.on("message", (message) => {
        console.log(`Received message ${message.id}:`);
        const parsedMessage = JSON.parse(message.data)
        parsedMessage._id = message.id
        console.log(parsedMessage)

        if (parsedMessage.to === "admin") {
            io.to(`admin:${parsedMessage.from}`).emit("NewMessage", parsedMessage);
        } else {
            io.to(`${parsedMessage.to}`).emit("NewMessage", parsedMessage);
        }
        message.ack();
    });

    subscription.on('error', errorHandler);
}

服务器.js

...
const listenForMessages = require("./message_processing/listen");
listenForMessages("messageReceiver", io);

样品台 output

以下控制台 output 是通过在本地运行应用程序并使用两个浏览器 [一个隐身] 相互聊天生成的。 可以看出，只有最后一条消息实际上被侦听器拾取（并打印出来）。 有趣的是，由于调用的异步特性，接收到的消息的打印输出出现在消息发送的日志之前（即延迟肯定不会成为问题）。

[0] went into deserialize user
[0] Message 875007020424601 published.
[0] went into deserialize user
[0] Message 875006704834317 published.
[0] went into deserialize user
[0] Message 875006583857400 published.
[0] went into deserialize user
[0] Message 875006520104287 published.
[0] went into deserialize user
[0] Message 875006699141463 published.
[0] went into deserialize user
[0] Received message 875006881073134:
[0] {
[0]   from: '5e949f73aeed81beefaf6daa',
[0]   to: 'admin',
[0]   content: 'i6',
[0]   seenByUser: true,
[0]   type: 'message',
[0]   createdByUser: true,
[0]   createdAt: '2020-04-20T07:44:54.280Z',
[0]   _id: '875006881073134'
[0] }
[0] Message 875006881073134 published.

在其他一些情况下，较早的消息起作用，然后侦听器似乎停止了。

Answer 1

您可以做几件事来检查正在发生的事情：

1. Go 到主题页，select 主题看详情，看发布率。 确保就 Pub/Sub 而言，您认为正在发布的消息实际上已成功发布。 如果发布失败，它们可能会交付给您的一个订阅者，而不是另一个。
2. Go 到 订阅页面，select 订阅查看详情，并查看“Unacked message count”和“Oldest unacked message age”图表。 如果这些不为零，则意味着有消息未传递给您的订阅者。 如果它们为零，则意味着消息正在传递给您的订阅者并得到您的订阅者的确认。

如果未确认消息的数量为零，则可能的原因是在接收消息的订阅上充当订阅者的流氓进程。 也许您的服务的先前实例仍在意外运行？ 或者可能另一个应该使用不同订阅的任务正在使用相同的订阅。

要注意的另一件事是，订阅者只会收到在消息发布之前创建的订阅的消息。 因此，如果您启动了发布者并发布了一些消息，然后创建了订阅，例如在订阅者启动时，那么订阅者将不会收到那些较早的消息。