簡體 English 中英

Flink on YARN：如何指定任務管理器的數量

[英]Flink on YARN: how do I specify the number of Task Managers

原文 2022-10-08 05:20:13 6 1 apache-flink

在 Flink 的早期版本（例如1.6 ）中，我可以使用-n為 session 模式和使用-yn的 per-job 模式指定任務管理器的數量，但這些標志在 Flink 的更高版本中不存在（例如, 1.12 ).

想知道如何為較新版本的 Flink 在 YARN 上設置任務管理器的數量？ 或者我可以使用哪些相關屬性來控制 Flink 使用的資源？

1 個解決方案

在較新版本的 Flink 中，資源管理器會根據需要動態啟動任務管理器，以提供提交的作業所請求的槽數。 每個任務管理器將從 flink-conf.yaml 或通過yarn-session.sh啟動集群時提供的參數獲取其配置。

Flink：Manager的數量與紗線上的nodeManager的數量有關嗎？

[英]Flink: Is the number of Managers related to the number of nodeManagers on yarn

如何在flink中指定任務管理器/任務槽的核心數

[英]How to specify the number of cores for task manager/task slot in flink

我們如何在 Apache Flink 應用程序中增加任務管理器

[英]How can we Increase the Task Managers in Apache Flink application

Flink 1.3在YARN上運行單個作業如何設置每個TaskManager的任務插槽數

[英]Flink 1.3 running a single job on YARN how to set the number of Task Slots per TaskManager

Apache Flink：本地模式下的多個任務管理器

[英]Apache Flink: multiple task managers in local mode

Flink 任務管理器重啟后不處理數據

[英]Flink task managers are not processing data after restart

如何確定 flink 中的任務槽數

[英]How to determine number of task slots in flink

如何控制 Flink 作業在集群中的任務管理器之間正確分配/負載平衡？

[英]How to control Flink jobs to be distributed/load-balanced properly amongst task-managers in a cluster?

跨 flink 任務管理器平均分配任務槽

[英]Evenly distribute task slots across flink task managers

Flink Yarn 在任務失敗時無限重啟

[英]Flink Yarn infinite restart on task failure

暫無

暫無

聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

相關問題 Flink：Manager的數量與紗線上的nodeManager的數量有關嗎？如何在flink中指定任務管理器/任務槽的核心數我們如何在 Apache Flink 應用程序中增加任務管理器 Flink 1.3在YARN上運行單個作業如何設置每個TaskManager的任務插槽數 Apache Flink：本地模式下的多個任務管理器 Flink 任務管理器重啟后不處理數據如何確定 flink 中的任務槽數如何控制 Flink 作業在集群中的任務管理器之間正確分配/負載平衡？跨 flink 任務管理器平均分配任務槽 Flink Yarn 在任務失敗時無限重啟

相關標簽

粵ICP備18138465號 © 2020-2024 STACKOOM.COM