如何存储回归测试结果？答案

【问题标题】：how to store regression testing results?如何存储回归测试结果？
【发布时间】：2013-12-02 14:07:50
【问题描述】：

我们有很多回归测试，在每晚的产品构建中运行。有人可以建议一个系统来存储回归结果吗？

理想情况下，我们希望使用带有API 和ORM 的简单工具来存储简单记录，例如：

test_case1 | build_#1 | ok | timestamp1<br>
test_case2 | build_#1 | failed | timestamp2<br>

等等，或者可能是类似的东西。

似乎测试团队存在主要问题，因此我相信已经创建了存储回归测试结果的工具以及使用存储数据生成报告的能力。谢谢！

【问题讨论】：

你考虑过与 Jenkins 合作吗？
并非我们所有的测试都是从 Jenkins 运行的。我们使用 Jenkins 运行测试套件，但我们想存储测试方法的结果。所以 testng 将使用 API 将测试方法结果报告给任何“存储”。
我明白了，对于 Jenkins 测试...您对它的存储方式满意吗？以及您如何查看数据？
我们不在 Jenkins 中使用存储的数据.. Jenkins 只是启动器，只能以这种方式使用它是正确的.. 存储数据应该另一个系统

标签： orm storage regression-testing

【解决方案1】：

这取决于您在哪个环境中运行测试，我不知道有任何预构建的框架可以为您执行此操作。目前在工作中，我们正在将测试结果记录到 Hadoop 中的 Hive 表中，这非常有效，因为我们在运行测试时已经在 Hadoop 环境中。它允许我们返回并执行 SQL 查询，以查看构建失败如何随时间变化以及测试运行了多长时间等。

TLDR;我可以推荐记录测试结果的做法，它很有用。我不知道有任何专门为此目的而设计的框架，但是您可以自己轻松地实现它。您应该使用哪种存储系统完全取决于您的特定测试环境中最方便的存储系统。

【讨论】：