繁体 English 中英

Apache Flink 缓存作业吗？

[英]Does Apache Flink cache jobs?

原文 2021-12-06 12:51:14 5 1 apache-flink/ flink-streaming/ flink-batch

我注意到每次我运行一项新工作时，与再次启动它的时间相比，它所花费的时间大约长 20%？

如果一个作业多次运行，flink 是否会缓存一些结果并重用它们？ 如果是这样，我该如何控制？

我想测量我的任务运行多长时间，但每次我重新运行它们时都比以前快。

1 个解决方案

如果您使用一些有状态的函数和配置的检查点和保存点，您的工作可能需要一些时间才能从检查点恢复 state。

为了使 state 容错，Flink 需要检查点 state。 检查点允许 Flink 恢复 state 和流中的位置，从而为应用程序提供与无故障执行相同的语义。

更多关于检查点和这里。

监控检查点

群集中的Apache Flink流不会与工作人员分离作业

[英]Apache Flink streaming in cluster does not split jobs with workers

在 Apache Flink 中开发和部署作业

[英]Developing and deploy jobs in Apache Flink

运行Apache Flink作业时链接失败

[英]Linkage failure when running Apache Flink jobs

Apache Flink（如何唯一标记作业）

[英]Apache Flink (How to uniquely tag Jobs)

同一个 Apache Flink 项目中的多个作业

[英]Multiple Jobs in the Same Apache Flink Project

有没有办法将作业安排到 Apache Flink 中的特定处理器？

[英]Is there a way to schedule jobs to specific processor in Apache Flink?

什么可能导致Apache Flink作业中的长屏障对齐持续时间？

[英]What may cause long barrier alignment durations in Apache Flink jobs?

Apache Flink：运行许多作业时的性能问题

[英]Apache Flink: Performance issue when running many jobs

在 Apple M1 Silicon 上运行 Apache Flink 1.12 Jobs

[英]Running Apache Flink 1.12 Jobs on Apple M1 Silicon

在 Kubernetes 上的远程 Flink 集群上运行 Apache Beam 作业时出现问题

[英]Problem with running Apache Beam jobs on remote Flink cluster on Kubernetes

暂无

暂无

声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

相关问题 群集中的Apache Flink流不会与工作人员分离作业在 Apache Flink 中开发和部署作业运行Apache Flink作业时链接失败 Apache Flink（如何唯一标记作业）同一个 Apache Flink 项目中的多个作业有没有办法将作业安排到 Apache Flink 中的特定处理器？什么可能导致Apache Flink作业中的长屏障对齐持续时间？ Apache Flink：运行许多作业时的性能问题在 Apple M1 Silicon 上运行 Apache Flink 1.12 Jobs 在 Kubernetes 上的远程 Flink 集群上运行 Apache Beam 作业时出现问题

相关标签

粤ICP备18138465号 © 2020-2024 STACKOOM.COM