如何调查 jenkins 中的 Java 堆空间错误

Question

我有一个矩阵管道作业，它执行多个阶段（大约 200 个阶段），其中大部分是功能测试，其结果由以下代码记录：

        stage('Report') {
            script {
               def summary = junit allowEmptyResults: true, testResults: "**/artifacts/${product}/test-reports/*.xml"
               def buildURL = "${env.BUILD_URL}"
               def TestAnalyzer = buildURL.replace("/${env.BUILD_NUMBER}", "/test_results_analyzer")
               def TestsURL = buildURL.replace("job/${env.JOB_NAME}/${env.BUILD_NUMBER}", "blue/organizations/jenkins/${env.JOB_NAME}/detail/${env.JOB_NAME}/${env.BUILD_NUMBER}/tests")
               slackSend (
                  color: summary.failCount == 0 ? 'good' : 'warning',
                  message: "*<${TestsURL}|Test Summary>* for *${env.JOB_NAME}* on *${env.HOSTNAME} - ${product}* <${env.BUILD_URL}| #${env.BUILD_NUMBER}> - <${TestAnalyzer}|${summary.totalCount} Tests>, Failed: ${summary.failCount}, Skipped: ${summary.skipCount}, Passed: ${summary.passCount}"
               )
            }
        }

问题是这个 Report 阶段经常失败并出现以下错误：

> Archive JUnit-formatted test results                        9m 25s
[2022-11-16T02:51:49.569Z] Recording test results
Java heap space

我通过这样修改 systemd 服务配置，将 jenkins 服务器的堆空间增加到 8GB：

software-dev@magnet:~$ sudo cat /etc/systemd/system/jenkins.service.d/override.conf
[Service]
Environment="JAVA_OPTS=-Djava.awt.headless=true -Xmx8g"

考虑到了这一点，因为我使用以下命令进行了验证：

software-dev@magnet:~$ tr '\0' '\n' < /proc/$(pidof java)/cmdline
/usr/bin/java
-Djava.awt.headless=true
-Xmx10g
-jar
/usr/share/java/jenkins.war
--webroot=/var/cache/jenkins/war
--httpPort=8080

我刚刚将 Heap 大小增加到 10GB，我将等待今晚构建的结果，但我感觉这个 Heap 空间量看起来确实过大，所以我怀疑是一个插件，也许是 JUnit 那个，可能是越野车，可能会消耗太多 memory。

有人知道这样的事情吗？ 可以有解决方法吗？

更重要的是，我可以使用哪些方法来尝试跟踪某个插件是否消耗过多？ 自从我获得 CS 学位以来，我就有 Java 的概念，但我不熟悉 jenkins 开发生态系统。

提前谢谢你。

Answer 1

您可以尝试将测试分成块/批/组，但此解决方案需要更改代码。

更多细节

https://semaphoreci.com/community/tutorials/how-to-split-junit-tests-in-a-continuous-integration-environment

分组 JUnit 测试