在 kafka-python 的客户端中使用消息

Question

我是卡夫卡的新手。 通过从 kafka-python 的一些在线教程中获取帮助，我编写了以下代码：

   from kafka import SimpleProducer, KafkaClient, KafkaConsumer
   kafka =  KafkaClient("localhost:9092")
   producer = SimpleProducer(kafka)
   producer.send_messages(b'my-topic', b'this method', b'Hello World')
   consumer = KafkaConsumer('my-topic',
                     group_id='my_group',
                     bootstrap_servers=['localhost:9092'])
   for message in consumer:
       print("%s:%d:%d: key=%s value=%s" % (message.topic, message.partition,
                                         message.offset, message.key,
                                         message.value))

但问题是在最后一个 for 循环代码执行被卡住了，我无法弄清楚。

Answer 1

你原来的代码是对的。 我运行你的代码。 KafkaConsumer 可用于消费消息。 如果您打开另一个控制台，并运行相同的原始代码，您将看到输出。

在http://kafka-python.readthedocs.org/en/latest/apidoc/kafka.consumer.html 中，有很多 Consumer 类，例如 SimpleConsumer、KafkaConsumer、Consumer 等。 为什么你的代码卡在 for 循环中？ 因为在你的代码消费者设置消费默认新邮件。 在这种情况下，producer.send_messages() 函数产生的消息不会被消费者消费。

顺便说一句，如果您使用 SimpleConsumer，您可以使用 seek() 设置您想要消费的消息的偏移量。