JVM 内存增长超出 ECS 容器的限制

Question

我的任务定义配置有以下限制：

"cpu": "1024",
"memory": "8192"

我正在使用“docker”cgroup 标志在 docker 容器内运行 jar：

java -XX:+UseContainerSupport -XX:MaxRAMPercentage=80 -XX:InitialRAMPercentage=70 /myjar.jar foo.Main

但是 ECS 因 OOM 错误而终止了我的服务。

我已经开始测量 JVM 内存使用情况，并使用以下方法从我的应用程序中将其报告为调试措施：

val bean: MemoryMXBean = ManagementFactory.getMemoryMXBean
val hmu: MemoryUsage = bean.getHeapMemoryUsage
val nhu = bean.getNonHeapMemoryUsage
... reporting these metrics ...

在图片中，顶部是 cloud-watch 报告的已用内存。如您所见，它是 100%。

底部图表显示应用程序报告的内存：

val pc = (1.0 * hmu.getUsed) / hmu.getCommitted

来自文档：

 * Below is a picture showing an example of a memory pool:
 *
 * <pre>
 *        +----------------------------------------------+
 *        +////////////////           |                  +
 *        +////////////////           |                  +
 *        +----------------------------------------------+
 *
 *        |--------|
 *           init
 *        |---------------|
 *               used
 *        |---------------------------|
 *                  committed
 *        |----------------------------------------------|
 *                            max
    /**
     * Returns the amount of memory in bytes that is committed for
     * the Java virtual machine to use.  This amount of memory is
     * guaranteed for the Java virtual machine to use.
     *
     * @return the amount of committed memory in bytes.
     *
     */
    public long getCommitted() {
        return committed;
    };

/**
     * Returns the amount of used memory in bytes.
     *
     * @return the amount of used memory in bytes.
     *
     */
    public long getUsed() {
        return used;
    };

我的 Docker 文件很简单：

FROM openjdk:10-jdk

COPY service.jar /affinity-service.jar
COPY start.sh /start.sh
RUN chmod +x /start.sh
CMD ["/start.sh"]

而start.sh 是：

#!/bin/bash
set -x

OPTS=""

#... setting flags from ENV values...
#...
#...

java -XX:+UseContainerSupport -XX:MaxRAMPercentage=80 -XX:InitialRAMPercentage=70 ${OPTS} -jar /service.jar com.....Service

Answer 1

MaxRAMPercentage 和 InitialRAMPercentage 标志不限制 Java 进程的内存。
这些标志唯一影响的是堆大小 - 有关详细信息，请参阅this answer。

正如我在here 解释的那样，Java 进程可以使用比堆大小更多的内存。

坏消息是 - 仅使用 JVM 标志来设置硬内存限制是不可能的，以保证 JVM 永远不会被操作系统杀死。但是same answer 可能会告诉您如何分析 Java 进程的内存占用。