如何知道Amazon EMR实例的MIN_CONTAINER_SIZE？

Question

如何获得Amazon EMR集群上的默认设置MIN_CONTAINER_SIZE ？ 由于我想通过使用此公式来计算EMR上每个节点的内存使用情况

RAM-per-container = max(MIN_CONTAINER_SIZE, (Total Available RAM) / containers))

谢谢！

Answer 1

在EMR 4.x中，默认的最小容器大小为256M。 但是上限将受到每个实例类型可用于nodemanager的内存的限制（ http://docs.aws.amazon.com/ElasticMapReduce/latest/ReleaseGuide/emr-hadoop-task-config.html ）。 然后，在256M到上限之间的内存量取决于应用程序，并且可以针对每个应用程序进行配置。

如果您共享有关内存/容器使用的总体目标，则可以提供更多详细信息以最大程度地实现所需的结果。