排队系统

Question

我需要实施一个新项目，该项目将从三个不同的服务器上进行处理。

基本上，一个系统将填满一个队列，然后每个单独的系统将从该队列中拉出（弹出作业/消息），然后做事。 因此，基本上，在标准FIFO中，子级服务器上的进程将进行弹出。

在所有排队系统中，有哪些建议？ 我查看了RabbitMQ，但这更像是“推”，就像我说的那样，我需要“拉”吗？ 我真的不想建立一个，只是抓住一些可行的方法。 当然，它必须是开源的:-)

谢谢

Answer 1

看一看beantalkd（基于python的排队系统）。 它非常简单，但是非常快速且灵活。 我已经在EC2云上使用了它，对大约500个作业/分钟进行排队和服务（删除），其中100台计算机同时访问该队列。