![](/img/trans.png)
[英]Flink: Wrap executable non-flink jar to run it in a flink cluster
[英]Flink: Jar file execution on Flink cluster
我将flink群集与2个不同物理节点上的9个任务管理器一起使用。 当我将罐子提交给Flink的Jobmanager(Master)时,罐子到底发生了什么。 我的意思是,jar是否分布到所有工作节点,还是函数的某些部分重复到所有工作节点?
我之所以这样问是因为,当我尝试运行我的应用程序时,它在本地成功运行,但是如果要在群集上运行,则会在FlatMapFunction上给出序列化错误。
作业管理器处理应用程序代码,将其拆分为任务和子任务,然后将它们发送到任务管理器中的一个或多个(取决于任务并行性)执行插槽。 从Flink 文档中 :
每个工作程序(TaskManager)是一个JVM进程,并且可以在单独的线程中执行一个或多个子任务。 为了控制一个工人接受多少个任务,一个工人有一个所谓的任务槽(至少一个)。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.