簡體 English 中英

Apache Flink 緩存作業嗎？

[英]Does Apache Flink cache jobs?

原文 2021-12-06 12:51:14 1 1 apache-flink/ flink-streaming/ flink-batch

我注意到每次我運行一項新工作時，與再次啟動它的時間相比，它所花費的時間大約長 20%？

如果一個作業多次運行，flink 是否會緩存一些結果並重用它們？ 如果是這樣，我該如何控制？

我想測量我的任務運行多長時間，但每次我重新運行它們時都比以前快。

1 個解決方案

如果您使用一些有狀態的函數和配置的檢查點和保存點，您的工作可能需要一些時間才能從檢查點恢復 state。

為了使 state 容錯，Flink 需要檢查點 state。 檢查點允許 Flink 恢復 state 和流中的位置，從而為應用程序提供與無故障執行相同的語義。

更多關於檢查點和這里。

監控檢查點

群集中的Apache Flink流不會與工作人員分離作業

[英]Apache Flink streaming in cluster does not split jobs with workers

在 Apache Flink 中開發和部署作業

[英]Developing and deploy jobs in Apache Flink

運行Apache Flink作業時鏈接失敗

[英]Linkage failure when running Apache Flink jobs

Apache Flink（如何唯一標記作業）

[英]Apache Flink (How to uniquely tag Jobs)

同一個 Apache Flink 項目中的多個作業

[英]Multiple Jobs in the Same Apache Flink Project

有沒有辦法將作業安排到 Apache Flink 中的特定處理器？

[英]Is there a way to schedule jobs to specific processor in Apache Flink?

什么可能導致Apache Flink作業中的長屏障對齊持續時間？

[英]What may cause long barrier alignment durations in Apache Flink jobs?

Apache Flink：運行許多作業時的性能問題

[英]Apache Flink: Performance issue when running many jobs

在 Apple M1 Silicon 上運行 Apache Flink 1.12 Jobs

[英]Running Apache Flink 1.12 Jobs on Apple M1 Silicon

在 Kubernetes 上的遠程 Flink 集群上運行 Apache Beam 作業時出現問題

[英]Problem with running Apache Beam jobs on remote Flink cluster on Kubernetes

暫無

暫無

聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

相關問題 群集中的Apache Flink流不會與工作人員分離作業在 Apache Flink 中開發和部署作業運行Apache Flink作業時鏈接失敗 Apache Flink（如何唯一標記作業）同一個 Apache Flink 項目中的多個作業有沒有辦法將作業安排到 Apache Flink 中的特定處理器？什么可能導致Apache Flink作業中的長屏障對齊持續時間？ Apache Flink：運行許多作業時的性能問題在 Apple M1 Silicon 上運行 Apache Flink 1.12 Jobs 在 Kubernetes 上的遠程 Flink 集群上運行 Apache Beam 作業時出現問題

相關標簽

粵ICP備18138465號 © 2020-2024 STACKOOM.COM