如何配置 flink SQL 客戶端提交啟用檢查點的作業？

Question

啟用檢查點的 flinksql-client 配置文件的示例是什么？

當我通過 flink sql 客戶端提交流式作業時，檢查點未啟用。

Answer 1

checkpointing配置不能在flink sql客戶端配置文件中設置，但可以在集群配置文件（flink-conf.yaml）中設置。

您至少應該配置execution.checkpointing.interval 、 state.backend和state.checkpoints.dir 。

像這樣的東西，例如：

execution.checkpointing.interval: 10000
state.backend: filesystem
state.checkpoints.dir: file:///tmp/flink-checkpoints-directory
state.savepoints.dir: file:///tmp/flink-savepoints-directory

有關更多詳細信息，請參閱檢查點、 容錯和state 后端的配置文檔。

Answer 2

據我在文檔中看到的，您應該能夠通過設置如下屬性從 sql 客戶端執行此操作：

SET 'state.checkpoints.dir' = 'hdfs:///bar/foo/';
SET 'execution.checkpointing.mode' = 'EXACTLY_ONCE';
SET 'execution.checkpointing.interval' = '30min';
SET 'execution.checkpointing.min-pause' = '20min';
SET 'execution.checkpointing.max-concurrent-checkpoints' = '1';
SET 'execution.checkpointing.prefer-checkpoint-for-recovery' = 'true';