JUnit 和 Surefire 并行测试 - ForkCount 和 ThreadCount

Question

我正在使用 Surefire 插件在 Selenium Grid 上运行 Selenium 测试以执行测试。 就我的测试细分而言，我有几个课程，其中一些有 1 个测试，有的不止一个测试。

所以在我的 Grid 上，我有 30 个 chrome Web 驱动程序，我想在所有类中并行执行所有测试。

我已经阅读了如何使用我设置为的parallel 参数来执行此操作：

            <plugin>
                <artifactId>maven-surefire-plugin</artifactId>
                <version>2.17</version>
                <configuration>
                    <includes>
                        <include>${testSuite}</include>
                    </includes>
                    <parallel>all</parallel>
                    <useSystemClassLoader>false</useSystemClassLoader>
                    <perCoreThreadCount>false</perCoreThreadCount>
                    <threadCount>20</threadCount>
                    <browser>${browser_type}</browser>
                </configuration>
            </plugin>

然而，这似乎并没有填满我可用的所有 Chrome 网络驱动程序。

如果我然后使用forkCount，例如：

<forkCount>20</forkCount>
<reuseForks>true</reuseForks>

然后，当测试执行第一次开始时，所有的网络驱动程序都被填满了，但是它很快就开始下降并一次只运行一个。

所以我的问题：

• forkCount和threadCount有没有关系
• 我需要做些什么才能真正实现并行运行吗？

谢谢。

Answer 1

您必须提供明确的 junit 测试提供程序：

<plugin>
    <groupId>org.apache.maven.plugins</groupId>
    <artifactId>maven-surefire-plugin</artifactId>
    <version>2.18.1</version>
    <dependencies>
        <dependency>
            <groupId>org.apache.maven.surefire</groupId>
            <artifactId>surefire-junit47</artifactId>
            <version>2.18.1</version>
        </dependency>
    </dependencies>
    <configuration>
        <parallel>all</parallel>
        <useUnlimitedThreads>true</useUnlimitedThreads>
        <useSystemClassLoader>false</useSystemClassLoader>
        <includes>
            <include>${testSuite}</include>
        </includes>
        <systemPropertyVariables>
            <browser>${browser_type}</browser>
        </systemPropertyVariables>
     </configuration>
</plugin>

您应该使用 JUnit 4.7+，因为旧版本不能正确地进行并行测试。

如果您的测试不影响 JVM 运行时（通常情况并非如此），您也可以省略与 fork 相关的参数。

或者将您的测试迁移到 TestNG - 它是一个更优雅的框架，它更适合并行测试，然后是 JUnit (imo)。

Answer 2

并行运行测试的配置太多了。

根据文档：

forkCount

参数forkCount 定义了 Surefire 将同时生成以执行测试的最大 JVM 进程数。它支持与 maven-core 中的 -T 相同的语法：如果您以 C 终止该值，则该值将乘以系统中可用 CPU 内核的数量。例如，四核系统上的forkCount=2.5C 将导致分叉多达十个执行测试的并发 JVM 进程。

...

默认设置为forkCount=1/reuseForks=true，这意味着Surefire创建一个新的JVM进程来执行一个maven模块中的所有测试。

线程数

当使用reuseForks=true 和大于一的forkCount 值时，测试类会被一个接一个地交给分叉的进程。因此，parallel=classes 不会改变任何东西。但是，你可以使用parallel=methods：类在forkCount并发进程中执行，然后每个进程可以使用threadCount线程并行执行一个类的方法。

据我所知，threadCount 就像每个 fork 的子线程。

您可以调整这些参数以提高您的测试性能，例如，您可以：

<plugin>
    <groupId>org.apache.maven.plugins</groupId>
    <artifactId>maven-surefire-plugin</artifactId>
    <version>2.17</version>
    <configuration>
         <includes>
              <include>${testSuite}</include>
         </includes>
         <parallel>all</parallel>
         <useSystemClassLoader>false</useSystemClassLoader>
         <perCoreThreadCount>false</perCoreThreadCount>
         <forkCount>2.0C</forkCount>
         <reuseForks>true</reuseForks>
         <threadCount>20</threadCount>
         <browser>${browser_type}</browser>
    </configuration>
</plugin>

您可以在其网站上找到更多详细信息：

https://maven.apache.org/surefire/maven-surefire-plugin/examples/fork-options-and-parallel-execution.html