【问题标题】:failing a XCTestCase with assert without the test continuing to run but without stopping other tests在没有继续运行测试但没有停止其他测试的情况下使用断言失败 XCTestCase
【发布时间】:2014-01-26 17:43:47
【问题描述】:

我正在尝试使用 XCTest 框架测试我的应用程序。

如果某些逻辑条件成立(使用断言),我希望我的单个测试用例失败。 我不希望测试用例中的其余代码运行,因为这可能会导致问题(例如访问空指针) 我还希望测试用例的其余部分正常运行,并且只将失败的测试标记为失败。

我注意到 XCTestCase 有一个名为 continueAfterFailure 的属性。 但是,将其设置为 YES 会导致失败的测试在断言之后继续执行行,而将其设置为 NO 会导致其余测试根本不运行。

这个问题有解决办法吗?

【问题讨论】:

    标签: xcode xctest


    【解决方案1】:

    Pascal 的回答给了我正确实现这一目标的想法。现在,当断言失败时,XCTool 的行为类似于 OCUnit:测试用例的执行立即中止,调用 tearDown 并运行下一个测试用例。

    只需在您的基类(继承自 XCTestCase 类)中覆盖方法invokeTest:

    - (void)invokeTest
    {
        self.continueAfterFailure = NO;
    
        @try
        {
            [super invokeTest];
        }
        @finally
        {
            self.continueAfterFailure = YES;
        }
    }
    

    就是这样!

    【讨论】:

    • 很奇怪,但在 Xcode 9 中不起作用。在 XCTFail 之后它仍然会继续执行。
    【解决方案2】:

    最简单的方法是添加:

    continueAfterFailure = false
    

    进入 setUp() 方法。所以它看起来像这样:

    斯威夫特

    override func setUp() {
        super.setUp()
    
        continueAfterFailure = false
    }
    

    Objective-C

     - (void)setUp {
        [super setUp];
    
        [self setContinueAfterFailure:NO];
    }
    

    【讨论】:

    • 在 Objective-C 中,你应该使用 NO 而不是 FALSE。
    • 在 objC 中你可以使用 TRUE/FALSE 或 YES/NO,它不会改变任何东西,它只是一个句法的东西。
    • 当然,但你也可以说 0 和 1,但我们不这样做,因为正确的 ObjC 是 YES/NO。确定它有效,继续使用它,只要知道我不会是唯一一个纠正它的人。
    • 您还应该在tearDown() 中将continueAfterFailure 设置为true,否则所有测试将在一次失败后停止。
    • 来自Apple Documentation : "continueAfterFailure - 一个布尔值,指示测试用例是否应在发生故障后继续运行。"。它仅与单个“测试用例”相关,而不是类中所有可用的测试。
    【解决方案3】:

    一种选择是正常检查条件,如果为假则失败并从测试中返回。

    类似这样的:

    if (!condition) {
      XCFail(@"o noes");
      return;
    }
    

    您可以将其包装在辅助宏中以保持可读性。

    像 Kiwi 这样的 BDD 测试库更适合这类事情,因为它们可以更轻松地在多个测试之间共享设置,从而减少每个测试的断言。

    【讨论】:

    • +1 我认为这是唯一的方法,除了复制所有 XCTAssertXxx 宏。
    • 这不是唯一的方法,请查看其他答案以获得更好的方法。
    【解决方案4】:

    我可以使用continueAfterFailure 并让其他测试使用此模式运行:

    self.continueAfterFailure = NO;
    @try
    {
        // Perform test code here
    }
    @finally
    {
        self.continueAfterFailure = YES;
    }
    

    【讨论】:

    • 感谢您的这个想法。我用它来做出更好的答案,不需要更改测试用例的代码。看看吧。
    【解决方案5】:

    在 Swift 项目中,我使用了一个辅助函数(在我所有测试的共享超类中定义,它本身扩展了 XCTestCase):

    /// Like `XCTFail(...)` but aborts the test.
    func XCTAbortTest(_ message: String, 
                      file: StaticString = #file, line: UInt = #line
                     ) -> Never {
        self.continueAfterFailure = false
        XCTFail(message, file: file, line: line)
        fatalError("never reached")
    }
    

    正如评论所暗示的,对fatalError 的调用从未真正执行过; XCTFail 以有序的方式中止测试(tearDown 被调用,下一个测试运行等)。该调用只是为了欺骗编译器接受Never 作为返回类型,因为XCTFail 返回Void(如果continueAfterFailure == true,它确实返回)。

    请注意,对于每种测试方法,self.continueAfterFailure 都会重置为默认的 true。您也可以在 setUp() 中明确说明。

    【讨论】:

    • 我查看了我的失败,看起来有时在使用 xcodebuild 运行测试时,测试不会在 XCTFail 上停止,并且会使运行器在 fatalError 上崩溃。不过,我无法通过 Xcode 重现此内容。 :( 我正在设置 continueAfterFailure=False
    • @yuf 有趣;我从未尝试从 CLI 运行测试。不同的行为可能会有一个错误? ://
    猜你喜欢
    • 2017-01-10
    • 1970-01-01
    • 2011-10-13
    • 2017-10-31
    • 2023-01-09
    • 2011-10-20
    • 2023-03-31
    • 2019-11-28
    • 2015-12-18
    相关资源
    最近更新 更多