是否有工具可以跟踪 CI 或 CD 流程中的手动步骤？

Question

我正在寻找某种工具，我可以将其集成到我们的 CI 流程中，以跟踪我们的手动步骤。

例如，我们希望在将版本推送到测试服务器之前，在集成服务器上运行一些手动测试脚本。目前 QA 会在构建完成时收到通知，执行手动测试，然后告诉某人推送版本以测试是否可以。

我希望找到能够跟踪手动测试何时成功完成并自动推送版本进行测试的东西。

应该可以从 Visual Studio Online 通知/触发该工具，并让它也触发 VSO 中的下一步。

我一直在谷歌搜索各种不同的东西，但似乎找不到任何接近我正在寻找的东西。像 Asana 这样的待办事项列表工具似乎没有我们需要的集成点，但也许我只是遗漏了一些东西？

Answer 1

您可以将新的发布管理工具与测试用例结合使用，以获得您想要的结果。

在 VSTS 中，您可以创建测试用例以反映所需测试的步骤，然后创建测试计划或套件以反映您需要手动运行的测试列表。

然后，作为发布过程的一部分，您可以创建一个自定义任务，等待针对您的列表完成测试运行。如果该测试运行全部通过，则进入下一步，如果任何测试失败，则发布失败。

这应该相当易于设置，您需要调用 API 来检查测试运行。如果您的测试人员使用 Microsoft 测试管理器，您还可以获得与您正在部署的构建相关联的结果并获得完全的可追溯性。

Answer 2

您可以尝试使用 VSTS 中的Release Management 工具。可以实现你想要的部分功能。

我假设您在构建定义中包含三个步骤：

1. 构建解决方案
2. 发布到集成服务器
3. 发布到测试服务器

您可以在构建定义中保留前两个步骤。然后在 Release Management 中创建一个发布定义，并在其中添加第三步。将定义配置为“持续部署”并将其链接到您的构建定义。分配您的 QA 作为此发布任务的批准者。现在，一旦构建任务完成，就会创建发布任务。但它将等待批准人（您的 QA）批准。测试通过后批准发布任务，构建将发布到测试服务器。否则，拒绝它。