在Docker容器上进行量角器异步并行测试

Question

几天来，我一直在努力使用Selenium docker并行执行测试。

以下情况：

• 使用规范在multiCapabilities中定义浏览器。
• 部署带有selenium-hub，2个firefox，2个chrome节点的容器。
• 运行测试

当chrome和firefox并行运行相同规格时，会出现问题。 根据执行速度，假设Firefox是第一位，铬是第二位。 （spec1同时在两个浏览器上运行）。

由于依赖规范spec1在firefox上是成功的（如预期的那样），在chrome上应具有异常的失败（如预期的那样）。 这是有趣的部分：

firefox测试结束，但是chrome挂起了（抛出异常的部分），并且在配置的茉莉花/测试超时后测试失败，可以说3分钟“ 未解决的承诺 ”。...由于我已经在等待该方法了，所以我已经将其包装在try catch中，异常应该转到测试中，在这里我也将测试方法包装在try catch中，并且如果存在异常done.fail（）应该停止测试。

但是它永远都不会到达那里……经过长时间的调试，我只能看到抛出异常的唯一信息，并且它永远也不会去测试，我应该抓住它并通过测试。

多功能配置

{
    browserName: 'chrome',
    shardTestFiles: true,
    maxInstances: 2,
    specs: [
        '../spec/**/spec1.js'
    ]
},
    {
    browserName: 'firefox',
    maxInstances: 2,
    shardTestFiles: true,
    marionette: true,
    specs: [
        '../spec/**/spec1.js'
    ]
},

量角器专用：

    SELENIUM_PROMISE_MANAGER: false,
    seleniumAddress: 'ip of the selenium hub'
    maxSessions: 4
    framework: 'jasmine'
    ... and other custom not related props as loggers, reporters etc.

测试例：

describe('test 1', () => {

    it('can done something', async (done) => {
        try {
            await doSomething();
        } catch (e) {
            done.fail(e);
        }

        done();
    }, 1000 * 60 * 5);
}

如果doSomething（）中存在异常，则应强制测试失败，但是它会在并行执行中挂起。

在不同的浏览器上执行相同的测试时，我会错过某些东西吗？

如果您需要更多信息，请告诉我。

Answer 1

这种回调不适用于异步。 如果您想通过测试失败，则可以更轻松地进行操作：

describe('test 1', () => {

    it('can done something', async () => {
        try {
            await doSomething();
        } catch (e) {
            throw new Error(e);
        }
    }
}

PS我强烈建议您使用Selenoid在容器中运行e2e测试。