使用 Azure DevOps 运行保存在 OpenText Application Quality Management 中的测试

本主题介绍如何使用 Azure DevOps Server 或 Services 运行保存在 OpenText Application Quality Management 中的 OpenText Functional Testing 测试。

备注: 本主题描述如何使用 UFT One Azure DevOps extension 版本 25.2.*。为了从最新功能中受益,建议将现有任务的版本更新到 25.2.*。使用此扩展版本时,请确保从 ADM-TFS-Extension GitHub 存储库安装了相应的 UFT.zip 文件。

先决条件:

在从 OpenText Application Quality Management 运行测试之前,您必须先设置集成。这是一次性设置,仅当您更改为其他版本时才需要重复此设置。

在 Azure DevOps Server 用于运行测试的计算机上,在通用模式下注册 ALM 客户端 客户端: 有关注册的详细信息,请参阅 OpenText Application Quality Management 帮助中心的“ALM 客户端启动器”部分。

返回页首

运行保存在 OpenText Application Quality Management 中的测试

在 Azure DevOps Server 中,执行以下操作:

  1. 创建管道。(注: 如果您要使用 TFS,请跳过此步骤)

    1. 使用 Empty job 模板创建构建管道或发布管道。

      注: 构建管道是在您未显式创建发布管道时创建的管道类型。

    2. 选择包含要运行测试的代理的代理池。

    3. 在管道变量中,添加一个 UFT_LAUNCHER 变量。该变量的值应为 UFTWorking 文件夹的完整路径。

    有关更多详细信息,请参阅 Microsoft Azure 文档。

  2. 按照构建顺序在正确的位置添加 OpenText Functional Testing 任务或构建步骤:

    1. 在“任务”目录中,选择“测试”选项卡以查看所有可用测试任务的列表。

    2. 选择“OpenText™ Functional Testing ALM 运行”任务,然后单击“添加”。添加的空白新任务将作为构建计划的一部分。
  3. 为任务提供以下详细信息:

    必填信息描述
    显示名称 (可选)

    默认情况下,Azure DevOps Server CI 系统将使用任务的预设描述符。

    为步骤提供更有意义的名称。

    ALM 服务器

    用于保存测试的 ALM 服务器。使用以下语法:

    “http://<ALM 服务器名称>”或“IP:端口/qcbin”

    您可能还需要使用通用注册模式连接到 OpenText Application Quality Management

    在这种情况下,请按“http://<ALM 服务器名称>”或“IP:端口/qcbin/start_a.jsp?common=true”格式输入 URL。

    ALM 凭据

    根据 ALM 服务器所需的身份验证类型,凭据可以是用户名和密码或用于 SSO 身份验证的 API 密钥。

    • 用户名和密码:

      用户名: 用于访问服务器的 ALM 用户名称。

      密码: 上面指定的 ALM 用户的密码。

    • SSO 身份验证:

      选择“启用 SSO”

      输入从您的 ALM 站点管理员处获得的“客户端 ID”和“API 密钥”

    确保此任务中指定的 ALM 用户或客户端具有打开和运行 OpenText Functional Testing 测试的正确权限。

    有关权限的详细信息,请参阅 OpenText Application Quality Management 帮助中心

    存储包含测试的项目的 ALM 服务器中的域。
    项目包含测试的项目。
    测试集

    使用此构建任务运行的测试集。提供这些测试集的完整 ALM 路径

    此字段中的每一行都可以包含测试集或文件夹。

    注: 输入测试集的路径时,是否指定根文件夹无关紧要。

    超时

    无法打开或运行测试时要等待的时间 (以秒为单位)。

    如果该字段留空,则不存在超时。

    时间戳模式

    在“扩展”选项卡中定义用于报告的时间戳字段的值格式。

    默认值为 yyyy-MM-dd HH:mm:ss

    运行模式

    运行测试集的计算机。选项包括:

    • 本地运行 (默认) - 在代理计算机上运行测试。
    • 远程运行 - 在您在“测试工具主机”中指定的主机上运行测试。
    • 在计划的主机上运行 - 在计划的主机上运行测试,如 OpenText Application Quality Management 中定义。
    测试工具主机

    选择运行测试集的主机的名称。

    注: 远程运行运行模式需要。否则无关。

    在 Azure 中隐藏敏感信息

    要隐藏诸如 ALM 密码或 SSO 凭据等信息,请为此信息定义 Azure 任务变量并将其锁定:

    1. 创建变量: 

      在任务的“变量”选项卡中,为要隐藏其值的每个字段添加一个变量。

      输入变量的值,选择锁定选项。

      提示: (可选) 也可以选择“在队列时间可设置”,以在对内部版本进行排队时可以编辑此值。

      例如,创建一个 MyPassword 变量,然后输入您的 ALM 密码作为其值。

    2. 将变量链接到任务中的相关字段:

      在“任务”选项卡中,单击“链接设置”

      在“要链接的设置”中,选择要链接到变量的字段,然后在“值”中输入 $(<变量名称>)。单击“链接”以完成该过程。

      例如,选择“密码”字段,然后输入 $(MyPassword)

  4. (可选) 从“测试”选项卡中,添加“发布测试结果”任务或构建步骤以将测试结果发布到 Azure Pipelines。

    为该步骤提供以下信息,以基于 OpenText Functional Testing 的 XML 运行结果报告创建 JUnit 报告:

    必填信息描述
    显示名称指定步骤名称。
    测试结果格式JUnit
    测试结果文件**/*.xml
    搜索文件夹

    提供文件夹的路径,该文件夹包含测试结果 XML 文件。

    使用以下格式: 

    在构建管道中: <UFTWorking\res 文件夹的路径>\Report_$(Build.BuildNumber)

    在发布管道中: <UFTWorking\res 文件夹的路径>\Report_$(Release.ReleaseID)

    测试运行标题

    指定报告的标题。

    如下在标题中使用环境变量,报告名称要基于管道名称和构建或版本号:

    在构建管道中: $(System.DefinitionName)_$(Build.BuildNumber)

    在发布管道中: $(System.DefinitionName)_$(Release.ReleaseID)

    这有助于检索有关 Azure DevOps 的报告。

  5. 为该步骤配置 CI 系统控制选项,包括:

    选项描述
    已启用指定是否应在此构建过程中运行步骤。
    出错时继续指示 CI 系统在此步骤出错时停止或继续构建。
    运行此任务指示 CI 系统何时运行此步骤。要在运行测试失败后发布结果,请选择“即使之前的任务失败,除非构建被取消”
  6. 将您的管道设置为运行:

    构建管道: 保存管道并将其排队。

    发布管道: 创建版本并部署管道。

    当管道运行时,测试作为您添加的任务的一部分运行。

    备注: 如果从 Azure DevOps Server 手动停止运行,则 OpenText Functional Testing 进程仍保持使用中状态,并且您无法通过连接到 OpenText Application Quality Management 来继续运行测试。

    要解决此问题,请手动停止 UFT.exeUFTRemoteAgent.exe 进程,然后从 Azure DevOps Server 继续构建。

返回页首

查看测试结果

测试运行之后,可以通过以下方式查看运行结果: 

可视报告

在运行结果的“扩展”选项卡中,您可以看到包含以下部分的报告: 

  • “Functional Testing 报告”部分显示测试运行状态。

  • “运行摘要”显示运行的测试数量以及每个状态的百分比。

  • 备注: 如果您正在使用发布管道,则这些结果可在“阶段”级别获得。

  • JUnit 报告显示所有测试的信息。

  • 备注: 您可以选择“生成失败测试报告”获得任何失败步骤的详细细分。

JUnit 测试结果报告

如果已添加“发布测试结果”步骤,可以在运行结果的“测试”选项卡上查看 JUnit 结果。

指向 OpenText Application Quality Management 上保存的运行结果的链接 (如果您从 TFS 运行测试)

OpenText Functional Testing 会自动将指向运行结果的链接保存为构建项目。

在运行结果的“摘要”选项卡上查看此链接。

例如:

返回页首

另请参见: