【问题标题】:Cryptic NSInternalInconsistencyException when running unit tests in Xcode 9 GM在 Xcode 9 GM 中运行单元测试时出现神秘的 NSInternalInconsistencyException
【发布时间】:2018-02-28 18:39:09
【问题描述】:

我在 Xcode 9 GM 上运行我的 iOS 应用程序的单元测试,其中一些失败并出现奇怪的 NSInternalInconsistencyException,抱怨无法报告某些测试断言,因为涉及的测试没有关联的 XCTestRun 对象。我正在使用 OCMockito + OCHamcrest 进行模拟和呼叫验证。

出于演示目的,假设我的应用名为 MyTestApp,并且我有一个测试类 FooTest(它继承自 XCTestCase)。在 -setUp 中,我为测试创建各种模拟对象并将它们连接在一起,在 -tearDown 中,我将它们设置为 nil 以防万一。

这是我得到的异常示例:

2017-09-19 13:23:01.852729-0700 xctest[17006:5392130] *** 断言失败 -[FooTest recordFailureWithDescription:inFile:atLine:expected:], /Library/Caches/com.apple.xbs/Sources/ XCTest_Sim/XCTest-13201/Sources/XCTestFramework/Core/XCTestCase.m:308 /Users/fooUser/Workspaces/MyTestApp/tests/FooTest.mm:46:错误:-[FooTest testSomething]:失败:捕获“NSInternalInconsistencyException”,“无法报告测试断言失败“预期 1 个匹配调用,但收到 0” /Users/fooUser/Workspaces/MyTestApp/tests/FooTest.mm:135 因为它是在没有关联 XCTestRun 对象的测试用例 -[FooTest testSomethingElse] 中提出的。当测试用例的构建和调用独立于标准 XCTest 基础设施时,可能会发生这种情况。” ( 0 核心基础 0x000000010255d1cb __exceptionPreprocess + 171 1 libobjc.A.dylib 0x0000000101ebff41 objc_exception_throw + 48 2 CoreFoundation 0x0000000102562362 + [NSException raise:format:arguments:] + 98 3 基础 0x0000000101827089 -[NSAssertionHandler handleFailureInMethod:object:file:lineNumber:description:] + 193 4 XCTest 0x0000000101d96875-[XCTestCase 记录失败描述:inFile:atLine:expected:] + 518 5 MyAppUnitTests 0x000000011d7f2f5a -[HCXCTestFailureReporter executeHandlingOfFailure:] + 154 6 MyAppUnitTests 0x000000011d7f2b73 -[HCTestFailureReporter 句柄故障:] + 67 7 MyAppUnitTests 0x000000011d64ec9a MKTFailTest + 217 8 MyAppUnitTests 0x000000011d64c3f4 -[MKTExactTimes verifyData:] + 254 9 MyAppUnitTests 0x000000011d64f2ba -[MKTBaseMockObject verifyInvocation:usingVerificationMode:] + 137 10 MyAppUnitTests 0x000000011d64f20b -[MKTBaseMockObject handlingVerifyOfInvocation:] + 115 11 MyAppUnitTests 0x000000011d64f15a -[MKTBaseMockObject forwardInvocation:] + 64 12 核心基础 0x00000001024dfed8 ___forwarding___ + 760 13 核心基础 0x00000001024dfb58 _CF_forwarding_prep_0 + 120 14 MyAppUnitTests 0x000000011c40b486 -[FooTest 设置] + 294 15 XCTest 0x0000000101d97b39 __24-[XCTestCase 调用测试]_block_invoke_3 + 31 16 XCTest 0x0000000101d97809 __24-[XCTestCase 调用测试]_block_invoke + 271 17 XCTest 0x0000000101ddff45-[XCUITestContext performInScope:] + 183 18 XCTest 0x0000000101d976ef -[XCTestCase 调用测试] + 141

注意几点:

  • 单元测试未初始化 XCTestCase 或 XCTest 框架之外的任何 XCTest“基础结构”类。
  • 受影响的单元测试的其余语句实际上得到执行,直到出现异常。
  • 涉及的代码行如下所示:[verify(_mockTestObject) description];
  • 堆栈跟踪是关于问题发生的位置 - 它说它在 -setUp 中,但据我所知,OCMockito 只是在 next 单元测试运行开始时报告预期失败.问题位置 (FooTest.mm:135) 类似于上面的 verify() 调用。

事实上,所有因此异常而失败的单元测试都会失败,因为我们正在尝试验证 -[NSObject description] 是否已在一个或另一个模拟对象上调用。删除所有验证该调用的实例会使测试通过。

我在 Google 上搜索了此特定 NSInternalInconsistencyException 的其他实例,但没有产生任何结果。我不确定以何种方式 -[NSObject description] 与可能在模拟对象上调用的任何其他方法不同 - 问题可能也不存在,但它只是以这种方式表现出来。我还试图查找是否有任何可以为 XCTest 打开的调试/诊断选项,以便我可以获得有关测试执行的更详细的日志记录信息,但我也没有找到类似的东西。

关于我接下来应该看哪里的任何想法?非常感谢!

【问题讨论】:

  • 在运行 XCTestCase().waitForExpectations 时遇到与 Xcode 的 UITesting 相同的错误
  • @CharlieSeligman 你在这方面有什么进展吗?同时我尝试了几件事——首先,我升级到了最新的 OCMockito/OCHamcrest 版本,但我仍然收到这个错误,所以它不太可能与旧的依赖项有关。其次,使用 Xcode 8.3.3,我发现即使我将 verify() 调用更改为使用错误的调用计数,测试仍然会通过,这意味着即使在 Xcode 8 上,这些调用也无法正常工作,但确实如此如此安静。
  • @RusianD - 最终重新设计了该方法,因此不再调用 waitForExpectations ......所以没有修复我害怕。

标签: ios xcode xctest xcode9-beta xcode9


【解决方案1】:

可能是expectation.expectedFulfillmentCount 设置为较小的数字。

expectation.expectedFulfillmentCount = numberOfTimesCalled

您的numberOfTimesCalled 可能低于调用期望的次数。例如,您可能会调用两次,但期望设置为调用一次。

【讨论】:

    【解决方案2】:

    我在处理一些大型遗留代码测试时遇到了类似的问题。问题是:当您单独运行 XCTExpectation 时,您的测试是否正常工作?如果是这样,这意味着使用NSInternalInconsistencyException 的测试之前执行的某些测试正在调度XCTest 相关方法,其方式是在相关测试完成后执行它们。

    看起来像(示例):

    Test1 -> 异步调度执行XCTFail的“块”

    Test1 -> 完成

    XCTFail 在主线程或其他线程上执行(但 Test1 通过,因为它没有“失败”地完成)。

    Test2 -> 用XCTExpectation 测试一些东西 -> NSInternalInconsistencyException

    Apple 文档没有提供有关 XCTest 内部内容的太多信息,但我很确定这就是问题所在。尝试按照故障排除步骤确定测试“冲突”(在没有 XCTestExpectation 的情况下执行异步操作的坏测试,例如使用带有完成处理程序的方法,这些方法最终执行XCTest 断言、失败等):

    1. 在您的套件中执行二进制搜索:禁用一半的测试并使用您的 FooTest 运行套件。
    2. 如果您的测试套件运行良好,请重新启用一半已禁用的测试。如果测试套件运行异常,请重新启用所有禁用的测试并禁用另一半。
    3. 对于剩下的少量测试,重复第 1 步。
    4. 最后,您将得到导致此异常的测试。

    在我的例子中,有多个测试导致与 XCTestExpectation 发生冲突,因此搜索非常麻烦(一组 1000 多个 XCTestCases 需要几个小时,因此大约有 5k 次测试)。

    然后彻底调查测试中发生的与您的测试相冲突的情况。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2013-11-03
      • 2019-12-19
      • 2021-12-05
      • 1970-01-01
      • 2013-02-09
      • 1970-01-01
      • 1970-01-01
      • 2021-05-09
      相关资源
      最近更新 更多