使用Flink发送多个主题Kafka Sink

Question

我有一个像这样的数据流：

DataStream[myTuple(topic, value)]

我想在相关主题中发送特定值。

所以我尝试做这样的事情：

new FlinkKafkaProducer010[myTuple](
  "default_topic",
  new KeyedSerializationSchema[myTuple](){
    override def getTargetTopic(element: myTuple): String = element.topic
    override def serializeKey(element: myTuple): Array[Byte] = null
    override def serializeValue(element: myTuple): Array[Byte] = new SimpleStringSchema().serialize(element.value)
  },
  properties)

但它不起作用，并且我有此警告：

WARN  org.apache.flink.streaming.connectors.kafka.FlinkKafkaProducerBase  - Overwriting the 'key.serializer' is not recommended
WARN  org.apache.flink.streaming.connectors.kafka.FlinkKafkaProducerBase  - Overwriting the 'value.serializer' is not recommended

我不知道怎么做，换一种方式。 谢谢您的帮助。

Answer 1

您可能在属性中设置了key.serializer和value.serializer 。 您不应该这样做，因为这样会导致您覆盖Flink内部使用的序列化器（ ByteArraySerializer ）。 删除这些属性，您的代码应该可以正常工作。