如何解决JAVA进程内存占用超过容器自身的资源限制,导致容器重启的问题?

故障前,java进程占3.9g左右,基于以上问题描述,我们想了解:1. java 进程的内存占用和 JVM xmx 配置的大小是否有确定的比例关系;2.是否可通过某种配置手段限制 java 进程的内存占用;3.针对 container 部署的场景,container 内存资源限额与 JVM 堆内存大小有没有配置比例的最佳实...显示全部

故障前,java进程占3.9g左右,基于以上问题描述,我们想了解:
1. java 进程的内存占用和 JVM xmx 配置的大小是否有确定的比例关系;
2.是否可通过某种配置手段限制 java 进程的内存占用;
3.针对 container 部署的场景,container 内存资源限额与 JVM 堆内存大小有没有配置比例的最佳实践。
环境信息如下:
K8S版本:1.14.6
DOCKER版本:18.9.6
container资源限额:内存4096Mi,CPU2000m
DOCKER内操作系统版本:CentOS linux release 7.4.1708(Core)
JDK版本:ZULU 8.33.0.1-jdk8.0.192-linux_x64
jvm参数:-Xms3072m -Xmx3072m -XX:MetaspaceSize=512m -XX:MaxMetaspaceSize=512m -XX:+UnlockExperimentalVMOptions -XX:+UseCGroupMemoryLimitForHeap -Xloggc:/tomcat/apache-tomcat-8.5.40/gclogs/gc.log.$(date -u +%Y-%m-%d-%H-%M) -verbose:gc -XX:+PrintGCDateStamps
JVM GC log 在 oom kill 前未见异常。

收起
参与8

查看其它 2 个回答晓风的回答

晓风晓风其它用友网络

JVM默认的最大Heap大小是系统内存的1/4。在java的早期版本中(小于1.8.131),不支持读取cgroup的限制。默认是从/proc/目录读取可用内存。容器中的/proc目录默认是挂载的宿主机的内存目录。即java 读取的到可用的内存是宿主机的内存。那么自然会导致进程超出容器limit 限制的问题。

正确设置Java内存防止容器OOM Killer

  1. 获取容器内存限制,在启动参数中设置堆内存大小

    #!/bin/bash
    limit_in_bytes=$(cat /sys/fs/cgroup/memory/memory.limit_in_bytes)
    # If not default limit_in_bytes in cgroup
    if [ "$limit_in_bytes" -ne "9223372036854771712" ]
    then
     limit_in_megabytes=$(expr $limit_in_bytes \\/ 1048576)
     heap_size=$(expr $limit_in_megabytes - $RESERVED_MEGABYTES)
     export JAVA_OPTS="-Xmx${heap_size}m $JAVA_OPTS"
     echo JAVA_OPTS=$JAVA_OPTS
    fi
    exec catalina.sh run

2:在java版本8u131和9以后使用以下标志允许JVM基于容器限制进行垃圾收集

-XX:+UnlockExperimentalVMOptions -XX:+UseCGroupMemoryLimitForHeap

新问题:-XX:+UnlockExperimentalVMOptions -XX:+UseCGroupMemoryLimitForHeap后,docker没有被kill了。但fullGC很频繁,cpu大量占用在垃圾回收的工作上了。原因:默认的xmx的值为镜像上限内存的1/4,提前fullGC。导致内存的使用率不高。

互联网服务 · 2020-06-19
浏览3482

回答者

晓风
其它用友网络
擅长领域: 云计算容器容器云

晓风 最近回答过的问题

回答状态

  • 发布时间:2020-06-19
  • 关注会员:4 人
  • 回答浏览:3482
  • X社区推广