为什么我的测试一起运行时失败，但单独通过？

Question

当我在 Visual Studio 中编写测试时，我会通过保存、构建然后在 Nunit 中运行测试来检查它是否有效（右键单击测试然后运行）。

测试成功了... 所以我继续...

现在我已经编写了另一个测试，它可以像上面一样保存和测试它。但是，它们一起运行时不起作用。

这是我的两个测试，单独运行时有效，但一起运行时失败：

using System;
using NUnit.Framework;
using OpenQA.Selenium.Support.UI;
using OpenQA.Selenium;

namespace Fixtures.Users.Page1
{
    [TestFixture]
    public class AdminNavigateToPage1 : SeleniumTestBase
    {
        [Test]
        public void AdminNavigateToPage1()
        {
            NavigateTo<LogonPage>().LogonAsCustomerAdministrator();
            NavigateTo<Page1>();
            var headerelement = Driver.FindElement(By.ClassName("header"));

            Assert.That(headerelement.Text, Is.EqualTo("Page Title"));
            Assert.That(Driver.Url, Is.EqualTo("http://localhost/Page Title"));
        }

        [Test]
        public void AdminNavigateToPage1ViaMenu()
        {
            NavigateTo<LogonPage>().LogonAsCustomerAdministrator();
            Driver.FindElement(By.Id("menuitem1")).Click();
            Driver.FindElement(By.Id("submenuitem4")).Click();
            var headerelement = Driver.FindElement(By.ClassName("header"));

            Assert.That(headerelement.Text, Is.EqualTo("Page Title"));
            Assert.That(Driver.Url, Is.EqualTo("http://localhost/Page Title"));
        }
    }
}

当第二个测试因为它们一起运行而失败时

Nunit 展示了这个：

Sse.Bec.Web.Tests.Fixtures.ManageSitesAndUsers.ChangeOfPremises.AdminNavigateToChangeOfPremises.AdminNavigateToPageChangeOfPremisesViaMenu： OpenQA.Selenium.NoSuchElementException : 找不到元素

这一行被突出显示：

var headerelement = Driver.FindElement(By.ClassName("header"));

有谁知道为什么我的代码一起运行时失败，但单独运行时通过？

任何答案将不胜感激！

Answer 1

查看TestFixtureSetup、Setup、TestFixtureTearDown 和TearDown。
这些属性允许您设置一次测试环境，而不是每次测试一次。

Answer 2

您确定在运行其中一项测试后该方法

NavigateTo<LogonPage>().LogonAsCustomerAdministrator();

要带你回到你应该去的地方吗？失败似乎是由于导航处理程序不当造成的（假设在两个测试中都存在并找到了 header 元素）。

Answer 3

你可以尝试两件事

1. 在以下两行之间放置断点。并在点击第二行时查看您在哪个页面

2. 通过 Thread.Sleep 在这两行之间引入一点延迟

   Driver.FindElement(By.Id("submenuitem4")).Click();
   var headerelement = Driver.FindElement(By.ClassName("header"));
   

Answer 4

在不知道 Selenium 的工作原理的情况下，我押注Driver，这似乎是一个静态类，因此 2 个测试共享状态。共享状态的一个示例是Driver.Url。因为测试是并行运行的，所以有一个竞争条件来设置这个对象的状态。

也就是说，我没有适合你的解决方案:)

Answer 5

如果以上答案都不适合您，我通过在失败测试中的断言之前添加Thread.Sleep(1) 解决了这个问题...

看起来测试同步在某处丢失了...请注意我的测试不依赖于顺序，我没有任何静态成员或外部依赖。

Answer 6

我认为您需要确保您可以登录进行第二次测试，这可能会失败，因为您已经登录了？

-> 将登录置于 设置方法 或（因为您似乎在两个测试中使用相同的用户）甚至直到 fixture 设置 -> 注销（如果需要）可能会放在拆卸方法中

     [SetUp]
     public void LaunchTest()
     {
        NavigateTo<LogonPage>().LogonAsCustomerAdministrator();
     }

     [TearDown]
     public void StopTest()
     {
        // logoff
     }
     [Test]
     public void Test1()
     {...}
     [Test]
     public void Test2()
     {...}

如果 DOM 有延迟而不是 thread.sleep，我建议结合条件使用 webdriver.wait。睡眠可能在 80% 中起作用，而在其他情况下则不起作用。等待轮询直到达到更可靠且可读的超时。这是我通常如何处理的示例：

    var webDriverWait = new WebDriverWait(webDriver, ..);
    webDriverWait.Until(d => d.FindElement(By.CssSelector(".."))
        .Displayed))

Answer 7

这种情况通常发生在单元测试以某种方式使用共享资源/数据时。

1. 如果您的被测系统具有静态字段/属性，这些字段/属性被用来计算您断言的输出，也会发生这种情况。
2. 如果被测系统正在共享（静态）依赖项，则可能会发生这种情况。