【问题标题】:How to set up one unit test that is skipped if another one fails?如果另一个单元测试失败,如何设置一个单元测试被跳过?
【发布时间】:2016-05-27 08:53:34
【问题描述】:

xUnit.net 中是否有一种方法可以使单元测试依赖于另一个单元测试,以便在另一个单元测试失败时跳过?

注意:这不是关于测试之间共享固定装置或使测试相互耦合等问题。我避免这样做。

示例

Given:     Unit tests OuterTest and InnerTest
Condition: If OuterTest is dependent on InnerTest and InnerTest fails
Result:    OuterTest is skipped (ideally with an explanation)

基本原理

这将作为单元测试序列化的一部分出现,但我也可以考虑其他用例。我有一个 Outer 类型,它采用 Inner 类型的依赖项,其中 Inner 被序列化为 Outer 序列化的一部分。我有一个 Inner 类型的序列化单元测试,如果失败,我知道 Outer 的序列化单元测试将由于嵌套而失败。

类型看起来像这样:

[Serializable]
class Inner {}

[Serializable]
class Outer {
 
    public Outer(Inner inner) {
        Inner = inner;
    }

    [Serializable]
    Inner Inner { get; }
}
  • 我真的不想在 Outer 的单元测试中为 Inner 使用 Stub,因为这迫使我为 Inner 引入一个接口,并且使层次结构混乱,其中只需要这些类型的单个具体实现。它还迫使我为存根创建一个自定义序列化程序,这听起来麻烦多于好处。

  • 鉴于很难为内部类创建存根,以下是我的论点:我不希望两个测试都失败,因为这样很难找到失败的根本原因。我认为最好跳过 Outer 的单元测试并发出依赖失败的警告。

问题

我搜索了一段时间没有找到关于这个用例的任何信息,因此我有以下问题:

  1. 是否可以根据 xUnit.net 中其他单元测试的结果创建有条件运行的测试?
  2. 这是一个错误的请求还是代码异味?如果是,为什么?

【问题讨论】:

  • 这可能是个坏主意。您希望测试尽可能小,并且不受周围环境的影响。如果一项更改导致两个单元测试中断,那么要么您引入了 2 个问题,要么您的测试过于宽泛/脆弱。
  • 如果它们相互依赖,它们不是单元测试。
  • 这些反对意见肯定是首先想到的,但相反,这实际上是作为一种进行单元测试的方法提出的。鉴于内部测试成功,外部测试实际上只会测试外部单元。 (无需更改太多代码以符合使用接口和存根的常规单元测试,在这种情况下需要做很多工作)
  • 尝试更改标题,它会邀请与您的特定问题无关的 cmets。我认为这是一个合理的要求。例如,如果您知道一个组件只能在具有细粒度时钟的系统上可靠地运行,并且需要一段时间来检查它,请使其所有测试用例都依赖于一个特殊的测试用例。

标签: c# unit-testing xunit.net


【解决方案1】:

你不想那样做。如果您的某件事会破坏多项测试,那么您希望您的测试能够展示一个问题可能影响整个系统的所有方式。

在您的情况下,您应该做的是通过序列化您的 Outer 类来运行两条测试。一个,使用现有的对象,另一个使用 Inner 类的模拟。

有一个强有力的论点是,没有模拟 Inner 类的情况可以被认为是“集成”测试,但是,因为它只是使用存在的对象,我认为这有点灰色地区。

在Outer 因为Inner 不能序列化而无法序列化的测试中,通过查看单元测试的结果来了解这一点仍然非常重要。

【讨论】:

  • 嗯,这与我在问题中提到的两点背道而驰。 1、我没有Inner的接口,mock起来很困难。我可以只为了单元测试而介绍它,但我觉得这不是很令人满意。它甚至对序列化的性能有非常负面的影响。 2. 我认为在这种情况下提供更多信息表明外部单元测试失败是不正确的。 IMO 最好跳过带有警告的外部单元测试,这给了我一个快速反馈,说明问题出在内部类型上。当这个问题解决后,我可以转向外部。
  • 是的,但这回答了您的第二个问题:“这是一个错误的请求还是代码异味。如果是,为什么?”
  • 回答关于模拟Inner 类的问题(我不提倡为它创建一个接口,模拟将是一个派生类型),是你没有解释为什么类偶尔或一直无法序列化。模拟应该能够解决这个问题。
  • 感谢您回答“为什么”部分 :) 我只是不确定我是否相信这个特殊案例中的论点。我通常赞成创建存根/模拟,但在这里我有一个很难模拟的内部类型。它是密封的(因为,原因......),我不想引入接口,因为我使用的序列化程序正在为接口类型创建开销(流大小和时间开销)。
  • 我已经更新了这个问题并澄清:鉴于很难为内部类创建存根,以下是我的论点:我不希望两个测试都失败,因为这会使很难找到失败的根本原因。我认为最好跳过 Outer 的单元测试并发出依赖失败的警告。
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2018-07-19
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2018-10-27
相关资源
最近更新 更多