繁体   English   中英

Flink:在Flink集群上执行Jar文件

[英]Flink: Jar file execution on Flink cluster

我将flink群集与2个不同物理节点上的9个任务管理器一起使用。 当我将罐子提交给Flink的Jobmanager(Master)时,罐子到底发生了什么。 我的意思是,jar是否分布到所有工作节点,还是函数的某些部分重复到所有工作节点?

我之所以这样问是因为,当我尝试运行我的应用程序时,它在本地成功运行,但是如果要在群集上运行,则会在FlatMapFunction上给出序列化错误。

作业管理器处理应用程序代码,将其拆分为任务和子任务,然后将它们发送到任务管理器中的一个或多个(取决于任务并行性)执行插槽。 从Flink 文档中

每个工作程序(TaskManager)是一个JVM进程,并且可以在单独的线程中执行一个或多个子任务。 为了控制一个工人接受多少个任务,一个工人有一个所谓的任务槽(至少一个)。

查看此图

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM