使用 Apache Beam 模式的效果

Question

当我们阅读源代码时，在我们的代码中指定光束模式有什么用？ 它如何使我们的管道更有效率？

Answer 1

模式不是为了方便代码阅读，而是为了更容易在管道内进行类型转换（更好的性能，更少需要指定编码器等），并且能够应用更高级别的转换，例如Beam SQL ，连接在 Java或 Python 中的数据帧中。

由于类型转换，管道效率更高。 Schema 类型直接映射到编程语言类型，并且它们还具有用于序列化的高效编码器。 但我想说模式的主要目的和优势在于我在上一段中提到的可能性。