在进程之间同步消息队列

Question

我正在尝试实现一个具有生产者和N（N> = 1）工人的程序。 它们使用消息队列进行通信。 这个想法是生产者向队列发送“任务”。 工作人员执行msgrcv（）调用以获取任务并执行一些代码。 在工作人员完成任务之后，它将计算结果发送到队列。 制作人将收到此消息并保存结果。

我正在使用POSIX消息队列，生产者和工作者同时工作。

该程序背后的问题是存在危及通信的场景。 每条消息的大小约为5000字节。 在UNIX系统中，最大队列大小约为16000字节，在这种情况下。

方案是：队列中有3个任务（5000 * 3 = 15000字节）。 一些工作者从队列中获取一条消息（现在队列有10000字节）。 工作人员开始执行任务，由于工作人员必须在每个任务中处理的字节数，生产者向队列发送另一条消息（队列现已满）。 现在任务完成后，工作人员尝试将结果发送到队列并被阻止（队列已满）。 生产者尝试将另一个任务发送到队列并且也被阻止。

如果我只用一个工作程序运行这个程序，那么这种情况很有可能发生。

有没有人有想法避免这种情况？

Answer 1

如果您无法更改队列大小，要使用的队列数或使用不同的排队API，那么排队较少的数据呢？

您可以将实际数据放在共享内存对象或临时文件中。 然后，不是将数据放入消息中，而是将文件名或共享内存对象名称以及消息中的偏移量放入其中。 然后，生产者进程可以在收到结果后将其清理干净。

它不一定必须是共享内存或临时文件，但其目的是将数据放在消息之外的其他位置，并在消息中包含其他进程访问它所需的任何信息。

Answer 2

我要么为客户端使用第二个消息队列 - >服务器响应或限制（#sent - #received）是一个安全号码。