如何配置 flink SQL 客户端提交启用检查点的作业？

Question

启用检查点的 flinksql-client 配置文件的示例是什么？

当我通过 flink sql 客户端提交流式作业时，检查点未启用。

Answer 1

checkpointing配置不能在flink sql客户端配置文件中设置，但可以在集群配置文件（flink-conf.yaml）中设置。

您至少应该配置execution.checkpointing.interval 、 state.backend和state.checkpoints.dir 。

像这样的东西，例如：

execution.checkpointing.interval: 10000
state.backend: filesystem
state.checkpoints.dir: file:///tmp/flink-checkpoints-directory
state.savepoints.dir: file:///tmp/flink-savepoints-directory

有关更多详细信息，请参阅检查点、 容错和state 后端的配置文档。

Answer 2

据我在文档中看到的，您应该能够通过设置如下属性从 sql 客户端执行此操作：

SET 'state.checkpoints.dir' = 'hdfs:///bar/foo/';
SET 'execution.checkpointing.mode' = 'EXACTLY_ONCE';
SET 'execution.checkpointing.interval' = '30min';
SET 'execution.checkpointing.min-pause' = '20min';
SET 'execution.checkpointing.max-concurrent-checkpoints' = '1';
SET 'execution.checkpointing.prefer-checkpoint-for-recovery' = 'true';