Kubernetes 和 JVM 内存设置

Question

在具有众多微服务的Kubernetes集群中，其中一个专门用于运行Java 1.8数据处理应用程序的Java Virtual Machine (JVM)。

直到最近，在该 JVM pod 中运行的作业消耗的 RAM 还不到 1 GB，因此 pod 已设置为 4 GB 的最大内存，没有为 JVM 进行任何明确的堆大小设置。

一些新数据现在需要整个 pod 大约 2.5 GB，包括 JVM（如kubernetes top命令报告的kubernetes top ，在启动后内存限制增加到 8 GB），但是 pod 在以 4 GB 的限制启动后很快崩溃.

使用像-Xms256m -Xmx3072m限制为 4 GB 的磁头大小范围并不能解决问题。 事实上，现在 pod 甚至还没有启动。

有没有办法参数化 JVM 以适应所需的 2.5 GB，而不增加 pod 的 4 GB 最大内存？

Answer 1

如果不指定-Xmx ，默认的“最大堆”是主机 RAM 的 1/4 (25%)。 JDK 10 改进了对容器的支持，因为它使用容器的 RAM 限制而不是底层主机。 正如@David Maze 所指出的，这已被移植到 JDK 8。

假设您有足够新的 JDK 8 版本，您可以使用-XX:MaxRAMPercentage来修改用于最大堆的总 RAM 的默认百分比。 因此，您可以告诉，而不是指定-Xmx ，例如-XX:MaxRAMPercentage=75.0 。 另见https://medium.com/adorsys/usecontainersupport-to-the-rescue-e77d6cfea712

下面是一个使用 alpine JDK docker 镜像的例子： https : //hub.docker.com/_/openjdk （特别参见“让 JVM 遵守 CPU 和 RAM 限制”一节）。

# this is running on the host with 2 GB RAM
docker run --mount type=bind,source="$(pwd)",target=/pwd -it openjdk:8

# running with MaxRAMPercentage=50 => half of the available RAM is used as "max heap"
root@c9b0b4d9e85b:/# java -XX:+PrintFlagsFinal -XX:MaxRAMPercentage=50.0 -version | grep -i maxheap
    uintx MaxHeapFreeRatio                          = 100                                 {manageable}
    uintx MaxHeapSize                              := 1044381696                          {product}
openjdk version "1.8.0_265"
OpenJDK Runtime Environment (build 1.8.0_265-b01)
OpenJDK 64-Bit Server VM (build 25.265-b01, mixed mode)

# running without MaxRAMPercentage => default 25% of RAM is used
root@c9b0b4d9e85b:/# java -XX:+PrintFlagsFinal -version | grep -i maxheap
    uintx MaxHeapFreeRatio                          = 100                                 {manageable}
    uintx MaxHeapSize                              := 522190848                           {product}
openjdk version "1.8.0_265"

Answer 2

在我的 K8s 设置中，我使用 consul 来管理 pod 配置。 这是一个即时覆盖 jvm 设置的命令。 这是一个非常具体的项目，但如果您使用 consul 进行配置，它可能会给您一个提示。

kubectl -n <namespace> exec -it consul-server -- bash -c "export CONSUL_HTTP_ADDR=https://localhost:8500 && /opt/../home/bin/bootstrap-config --token-file /opt/../config/etc/SecurityCertificateFramework/tokens/consul/default/management.token kv write config/processFlow/jvm/java_option_xmx -Xmx8192m"