繁体 English 中英

如何用Fro将Avro格式的数据写入Kafka？

[英]How to write data in Avro format to Kafka from Flink?

原文 2019-03-28 17:49:01 8 1 scala/ apache-kafka/ apache-flink/ avro

为了从Kafka读取Avro数据，我们有AvroDeserializationSchema 。 但是写作呢？

1 个解决方案

有一个AvroRowSerializationSchema可用于序列化Rows 。 如果您需要序列化特定类型，那么我建议您实现自己的架构，因为Flink目前不提供任何其他Avro SerializationSchemas 。

如何在Flink（Scala）中反序列化来自Kafka的Avro消息？

[英]How to deserialize Avro messages from Kafka in Flink (Scala)?

如何使用从 Flink 序列化到 AVRO 的 kafka 事件？

[英]How to consume kafka events serialized to AVRO from Flink?

Spark Streaming 从 Kafka 并以 Avro 格式写入 HDFS

[英]Spark Streaming From Kafka and Write to HDFS in Avro Format

Spark Dataframe以avro格式写入kafka主题？

[英]Spark Dataframe write to kafka topic in avro format?

如何将 Protobuf 数据从 Flink 转发到 Kafka 和 stdout？

[英]How can I forward Protobuf data from Flink to Kafka and stdout?

读取数据，保留数据N秒，写入数据（Kafka，Flink）

[英]Read Data, Hold Data for N Seconds, Write Data (Kafka, Flink)

如何反序列化从 Datastream Scala + apache Flink 获取的 Avro 响应

[英]How to Deseralize Avro response getting from Datastream Scala + apache Flink

数据未通过 Avro 序列化发送到 Kafka

[英]Data not sent to Kafka with Avro serialization

如何使用 scala 生成 avro ocf 格式（带架构）数据/文件？

[英]How to generate avro ocf format(with schema) data/file using scala?

如何从HDFS检索Avro数据？

[英]How to retrieve Avro data from HDFS?

暂无

暂无

声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

相关问题 如何在Flink（Scala）中反序列化来自Kafka的Avro消息？如何使用从 Flink 序列化到 AVRO 的 kafka 事件？ Spark Streaming 从 Kafka 并以 Avro 格式写入 HDFS Spark Dataframe以avro格式写入kafka主题？如何将 Protobuf 数据从 Flink 转发到 Kafka 和 stdout？读取数据，保留数据N秒，写入数据（Kafka，Flink）如何反序列化从 Datastream Scala + apache Flink 获取的 Avro 响应数据未通过 Avro 序列化发送到 Kafka 如何使用 scala 生成 avro ocf 格式（带架构）数据/文件？如何从HDFS检索Avro数据？

相关标签

粤ICP备18138465号 © 2020-2024 STACKOOM.COM