如何通过 TestRail 和 Sauce Labs 提高测试自动化的可见性和效率

作者 TestRail Team | 2023 年 6 月 7 日

大多数软件开发团队在测试过程中使用某种形式的自动化来提高重复回归测试的效率、速度和准确性。 使用自动化可以让您在更短的时间内执行大量测试并扩大测试覆盖范围,同时允许 QA 团队成员将时间集中在更有价值的探索性或基于风险的测试工作上,以改善用户体验和整体 您的应用程序的质量。

挑战

尽管自动化有很多好处,但软件测试行业在跟上发展速度方面面临着一些挑战。 随着越来越多的团队将 DevOps 实践纳入他们的软件开发流程中,发布的速度不断加快,测试的时间越来越少。

手动回归测试可能会减慢进度,尤其是随着应用程序的复杂性不断增加。 然而,开发自动化测试通常需要大量的前期投资。 自动化测试通常需要进行测试和验证,以确保它们有效地验证其设计测试的内容。

另一个挑战是调整开发、运行和维护测试所需的技术和人力资源。 对于您的内部 QA 运营团队来说,采购和管理运行各种操作系统、不同版本的 Web 浏览器和其他应用程序的多种类型的设备是低效的。

一旦开始运行自动化测试,您通常会发现很难保持对这些测试的进度和结果的可见性。 通常,唯一有权访问有关自动化测试的所有数据的人是设置测试的测试自动化工程师或 SDET。 这可能会导致沟通延迟、测试状态混乱以及错过应用程序中主要风险领域的可能性。

最后,在测试工具和框架方面,团队通常会采用新的解决方案,而不考虑与现有测试流程的集成。 这可能会导致数据孤岛、团队成员之间的沟通无效以及开发和质量保证之间缺乏有意义的可追溯性。

解决方案

为了在不牺牲质量或效率的情况下加快测试速度,您需要在与其余测试相同的位置跟踪测试自动化工作。 实现这一目标的一种方法是将 Sauce Labs 等连续测试自动化平台与 TestRail 等集中式测试管理平台集成。

TestRail 的质量操作系统集中了手动和自动测试管理,让您可以了解整个质量操作。 借助 TestRail,您可以整合并报告所有测试活动,无论您使用哪种工具或框架或如何执行测试。

Sauce Labs 允许您在多种设备上运行各种类型的测试自动化框架,例如 Selenium、Appium、Cypress、Playwright 等。 他们提供持续测试和错误报告解决方案,简化高质量代码的创建、交付和增强。

通过将 Sauce Labs 与 TestRail 集成,您可以利用自动化测试的强大功能来更快、更准确地运行测试,同时在整个测试操作中保持 360° 可见性和可追溯性。

关于集成

TestRail-Sauce Labs 集成提供了强大的工具集,可简化您的测试流程,实现更快、更高效的测试自动化,并提高整体 QA 和测试流程的可见性。

将 Sauce Labs 与 TestRail 集成的最简单方法是使用 Sauce Lab 的 Saucectl CLI 工具,然后使用 TestRail 的 trcli。 Saucectl 将在您的 Sauce Labs 帐户中跨多个浏览器、操作系统和设备运行自动化测试,然后 trcli 会自动将您的测试自动化结果上传到 TestRail。

Saucectl 是 Sauce Labs 提供的一款工具,充当命令行界面,用于协调框架中的测试与 Sauce Labs 丰富的并行化、测试历史记录过滤和分析之间的关系。 它还使用与测试会话相关的信息增强了 JUnit 报告。

TestRail CLI 是一个命令行界面工具,可帮助您导入自动化测试的结果,甚至自动创建测试用例。 TestRail CLI 工具读取 JUnit 报告并将相关数据发送到 TestRail,以便您可以将所有测试结果集中在一处。

将 Sauce Labs 与 TestRail 结合使用的好处

一旦 Sauce Labs 的测试结果进入 TestRail,数据就会整合到统一的测试平台中,为 QA 和开发团队提供多种好处:

  1. 单一事实来源:使用 TestRail 作为管理所有测试、运行和结果的集中位置。 通过在 TestRail 中报告测试自动化结果以及手动测试结果,您可以获得所有测试工作的统一存储库和历史记录。
  2. 增强的可见性和报告:实时可视化所有测试数据以发现风险区域。 通过将 Sauce Labs 与 TestRail 集成,您的整个 QA 团队都可以访问最新的测试信息,无论谁(或什么)运行测试,并使用 TestRail 的内置报告来隔离问题并优化您的质量流程。
  3. 端到端可追溯性:TestRail 允许您使用 TestRail 的引用和缺陷字段来报告开发需求、Sauce Labs 中运行的自动化测试以及缺陷之间的可追溯性。 这使您能够利用 Sauce Labs 中持续测试的力量,同时保持审计和安全要求的合规性。
  4. 改进协作:通过在单一事实来源中跟踪所有测试活动和质量指标,提高 QA 的透明度和可见性,从而改进团队协作。 无论是手动测试还是自动测试,所有测试结果都可以在 TestRail 中轻松访问,从而使团队能够快速识别和解决问题。
  5. 简化测试:通过使用 Sauce Labs 运行自动化测试并将 Sauce Labs 与 TestRail 集成,您可以加快自动化测试的构建、维护和报告过程。 通过专注于重要的事情来节省时间和精力:提高软件质量。
  6. 测试编排:通过使用 Sauce Orchestrate 进行 Web 和移动测试编排,充分利用 Sauce Labs 与 TestRail 的集成。 引入任何测试套件(任何框架、任何语言)并将测试运行速度加快 70%。 通过从您选择的 CI/CD 平台卸载计算工作负载(例如模拟 API 和临时微服务)来节省额外的时间和成本。 Sauce Labs 提供原创的、专用的测试基础设施,具有更高的成本效率、可扩展性和智能功能,可加速部署并让您的产品更快上市。

集成如何运作

集成 Sauce Labs 和 TestRail 很简单。 首先,安装 Saucectl 并按照 Sauce Labs Saucectl 文档中的说明将其配置为开始在 Sauce Labs 中运行自动化测试。 然后,安装 TestRail CLI 并将其连接到您的 TestRail 实例。 完成这些步骤后,唯一要做的就是使用 Sauce Labs 生成的 JUnit 报告将自动化测试结果推送到 TestRail。

将测试结果映射到 TestRail 中的测试用例后,您可以在一个平台中查看所有测试结果。 测试结果将包括测试状态、测试工件以及浏览器和平台信息。 使用测试结果中提供的超链接跳转回 Sauce Labs 并查找有关测试执行本身的更多信息。

TestRail 和 Sauce Labs 之间的集成提供:

  1. 使用您选择的框架在 Sauce Labs 中执行自动化测试
  2. 在 TestRail 中组织和可视化所有手动和自动测试活动
  3. TestRail 结果上的超链接可轻松导航回 Sauce Labs
  4. 从单一来源构建自定义报告,用于跟踪测试、参考、缺陷等的覆盖范围

总结

TestRail 和 Sauce Labs 的集成为软件开发团队提供了多种优势,包括更快的开发、提高的效率和改进的测试可见性。 通过使用命令行界面将 Sauce Labs 生成的 JUnit 报告中的自动化测试结果发送到 TestRail,团队可以轻松管理测试、跟踪进度并将结果存储在单一事实来源中,而不会丢失执行细节的跟踪。

此外,该集成还可以确保 Web 和移动应用程序在每个浏览器、操作系统和设备上按预期运行和执行,从而帮助团队确保用户体验的质量。 集成非常简单,并且在 sauctl 和 TestRail CLI 等工具的帮助下,团队可以增强测试流程并降低错误被忽视的风险。

想了解 TestRail-Sauce Labs 集成的工作原理吗?

6 月 20 日美国东部时间中午 12:00(中欧夏令时间下午 6:00),我们将与 Sauce Labs 一起举办一场名为“协调测试工作以实现企业成功”的网络研讨会。

揭示在当今不断发展的软件开发环境中实施测试自动化的挑战。 加入我们,了解如何将全面的测试管理与集中平台相集成,从而提高测试效率、速度和准确性。

要点:

  • 了解如何克服测试自动化方面的挑战并跟上开发速度。
  • 深入了解如何简化测试工作并节省时间和精力。
  • 了解端到端可追溯性和改善 QA 团队协作的重要性。
  • 了解 TestRail 和 Sauce Labs 如何增强测试流程的可见性和报告。

关于TestRail

TestRail 是唯一的集中式 QA 平台,让您能够构建、连接和优化所有测试流程。 超过 10,000 个 QA 团队使用 TestRail 通过更高效地测试、获得大规模实时可见性以及建立对 QA 的信心,更快地发布完美的产品。

关于 Sauce Labs

Sauce Labs 是提供尖端持续测试和错误报告解决方案的领导者,这些解决方案可简化高质量代码的创建、交付和增强。 Sauce Labs 在其包含统一数据智能层的云测试基础设施上执行了超过 50 亿次测试,提供了完整的解决方案来优化测试速度、效率和可扩展性。

在本文中:
  1. 挑战
  2. 解决方案
  3. 关于集成
  4. 将 Sauce Labs 与 TestRail 结合使用的好处
  5. 集成的工作原理
  6. 结论
  7. 想了解 TestRail-Sauce Labs 集成的工作原理吗?
订阅邮件
订阅
   |    备案号:京ICP备09015132号-1038