具有测试之间依赖关系的单元测试

Question

当你有单元测试时，你如何进行单元测试

• 一些通用单元测试
• 更复杂的测试检查边缘情况，取决于一般情况

举个例子，想象一下测试一个 CSV 阅读器（我只是编了一个符号来演示），

def test_readCsv(): ...

@dependsOn(test_readCsv)
def test_readCsv_duplicateColumnName(): ...

@dependsOn(test_readCsv)
def test_readCsv_unicodeColumnName(): ...

我希望子测试只有在其父测试成功时才会运行。这背后的原因是运行这些测试需要时间。许多回到单一原因的失败报告也不会提供信息。当然，我可以将所有边缘情况硬塞到主测试中，但我想知道是否有更结构化的方法来做到这一点。

我发现了这些相关但不同的问题，

• How to structure unit tests that have dependencies?
• Unit Testing - Is it bad form to have unit test calling other unit tests

更新：

我发现TestNG 对测试依赖项有很好的内置支持。你可以这样写测试，

@Test{dependsOnMethods = ("test_readCsv"))
public void test_readCsv_duplicateColumnName() {
   ...
}

Answer 1

就个人而言，我不会担心在单元测试之间创建依赖关系。这对我来说听起来有点代码味道。几点：

• 如果测试失败，让其他测试失败，并充分了解不利的代码更改造成的问题规模。
• 测试失败应该是例外而不是常态，那么当绝大多数时间（希望如此！）没有任何好处时，为什么要浪费精力并创建依赖关系呢？如果失败经常发生，那么您的问题不在于单元测试依赖关系，而在于频繁的测试失败。
• 单元测试应该运行得非常快。如果它们运行缓慢，则将精力集中在提高这些测试的速度上，而不是防止随后的失败。通过更多地解耦代码并使用依赖注入或模拟来做到这一点。

Answer 2

Proboscis 是 TestNG（Java 库）的 python 版本。

见packages.python.org/proboscis/

它支持依赖，例如

@test(depends_on=[test_readCsv])
public void test_readCsv_duplicateColumnName() {
   ...
}

Answer 3

我不确定你指的是什么语言（因为你没有在你的问题中特别提到它）但是对于像 PHPUnit 这样的东西，有一个 @depends 标签，它只会在依赖的情况下运行测试测试已经通过了。

根据您使用的语言或单元测试，也可能有类似的可用

Answer 4

我已经为Nose (Python) 实现了一个插件，它增加了对测试依赖项和测试优先级的支持。

正如在其他答案/cmets 中提到的，这通常是一个坏主意，但是在某些情况下您可能想要这样做（在我的情况下，它是集成测试的性能 - 进入可测试的开销很大状态，分钟与小时）。

您可以在这里找到它：nosedep。

一个最小的例子是：

def test_a:
  pass

@depends(before=test_a)
def test_b:
  pass

确保test_b 始终在test_a 之前运行。

Answer 5

您可能想使用pytest-dependency。根据他们的文档，代码看起来很优雅：

import pytest

@pytest.mark.dependency()
@pytest.mark.xfail(reason="deliberate fail")
def test_a():
    assert False

@pytest.mark.dependency()
def test_b():
    pass

@pytest.mark.dependency(depends=["test_a"])
def test_c():
    pass

@pytest.mark.dependency(depends=["test_b"])
def test_d():
    pass

@pytest.mark.dependency(depends=["test_b", "test_c"])
def test_e():
    pass

请注意，它是pytest 的插件，而不是unittest，它是python 本身的一部分。因此，您还需要 2 个依赖项（例如添加到 requirements.txt）：

pytest==5.1.1
pytest-dependency==0.4.0

Answer 6

根据最佳实践和单元测试原则，单元测试不应依赖于其他测试。

每个测试用例都应该检查具体的孤立行为。

如果某些测试用例失败了，您将确切知道我们的代码出了什么问题。