Relatório de amostra de tendência de execução de teste manual
Serviços de DevOps do Azure | Azure DevOps Server 2022 | Azure DevOps Server 2020
Este artigo mostra como obter o estado de execução de um ou mais Planos de Teste no Power BI. O relatório gerado é semelhante à imagem a seguir e ao gráfico de tendência de resultados do relatório de progresso.
O relatório exibe um gráfico de tendência que resume o número e os estados de resultado dos Planos de Teste executados durante um período de tempo especificado.
- Aprovado: Número de casos de teste aprovados.
- Reprovado: Número de casos de teste com falha.
- NotApplicable: Número de casos de teste
- Bloqueado: Número de casos de teste bloqueados de execução.
- NotExecuted: Número de casos de teste definidos, mas não executados.
Perguntas a que o relatório responde
Este relatório ajuda você a acompanhar o progresso da equipe em relação aos testes planejados de seu produto ou serviço, respondendo às seguintes perguntas:
- Quantos testes estão concluídos?
- Qual é o status atual dos testes aprovados, reprovados ou bloqueados?
- Quantos testes estão passando e o que a tendência indica sobre a qualidade do software?
- Quantos testes estão a falhar?
- Quantos testes estão bloqueados e o que indica a tendência?
Um relatório de tendência de execução de teste saudável mostra um progresso constante nos planos de teste em execução e aprovação. Idealmente, o relatório mostra um número relativamente estável de casos de teste para um determinado plano. À medida que o ciclo de desenvolvimento progride, o número de casos de teste aprovados deve aumentar, e o número de casos de teste em outros estados deve diminuir.
Importante
A integração do Power BI e o acesso ao feed OData do Serviço de Análise estão geralmente disponíveis para os Serviços de DevOps do Azure e o Azure DevOps Server 2020 e versões posteriores. As consultas de exemplo fornecidas neste artigo são válidas apenas no Azure DevOps Server 2020 e versões posteriores e dependem da versão v3.0-preview ou posterior. Nós encorajamos você a usar essas consultas e nos fornecer feedback.
Pré-requisitos
- Para visualizar dados do Google Analytics e consultar o serviço, você precisa ser membro de um projeto com acesso Básico ou superior. Por padrão, todos os membros do projeto recebem permissões para consultar o Google Analytics e definir exibições do Google Analytics.
- Para saber mais sobre outros pré-requisitos relacionados à ativação de serviços e recursos e atividades gerais de controle de dados, consulte Permissões e pré-requisitos para acessar o Google Analytics.
Nota
Este artigo pressupõe que você leu Visão geral de relatórios de exemplo usando consultas OData e tem uma compreensão básica do Power BI.
Para que o relatório gere dados úteis, a equipe deve realizar as seguintes atividades para gerenciar planos de teste:
Defina planos de teste, conjuntos de testes e casos de teste. Especifique o seu estado. Para que um conjunto de testes seja executado, ele deve estar no estado Em andamento. Para que um caso de teste seja executado, ele deve estar no estado Pronto. Para obter detalhes, consulte Criar planos de teste e conjuntos de testes e Criar casos de teste manuais.
Execute testes manuais e verifique os resultados. Marque os resultados de cada etapa de validação no caso de teste como aprovados ou reprovados. Para obter detalhes, consulte Executar testes manuais.
Nota
Os testadores devem marcar uma etapa de teste com um status se for uma etapa de teste de validação. O resultado geral de um teste reflete o status de todas as etapas de teste que foram marcadas. Portanto, o teste terá um status de reprovado se qualquer etapa de teste for marcada como reprovada ou não marcada.
Consultas de amostra
Você pode usar as seguintes consultas do conjunto de entidades para criar relatórios de tendência de execução de plano de TestPointHistorySnapshot teste diferentes, mas semelhantes.
Nota
Para determinar as propriedades disponíveis para fins de filtro ou relatório, consulte Referência de metadados para Análise de Planos de Teste. Você pode filtrar suas consultas ou retornar propriedades usando qualquer um dos Property valores em um EntityType ou NavigationPropertyBinding Path valores disponíveis com um EntitySet. Cada EntitySet um corresponde a um EntityTypearquivo . Para saber mais sobre o tipo de dados de cada valor, revise os metadados fornecidos para o .EntityType
Você pode colar a consulta do Power BI listada abaixo diretamente na janela Obter consulta em branco de dados>. Para obter mais informações, consulte Visão geral de relatórios de exemplo usando consultas OData.
let
Source = OData.Feed ("https://analytics.dev.azure.com/{organization}/{project}/_odata/v3.0-preview/TestPointHistorySnapshot?"
&"$apply=filter((TestSuite/TestPlanTitle eq '{testPlanTitle}') and (DateSK ge {startDate} and DateSK le {endDate}))"
&"/groupby("
&"(DateSK),"
&"aggregate("
&"$count as TotalCount,"
&"cast(ResultOutcome eq 'Passed', Edm.Int32) with sum as Passed,"
&"cast(ResultOutcome eq 'Failed', Edm.Int32) with sum as Failed,"
&"cast(ResultOutcome eq 'Blocked', Edm.Int32) with sum as Blocked,"
&"cast(ResultOutcome eq 'NotApplicable', Edm.Int32) with sum as NotApplicable,"
&"cast(ResultOutcome eq 'None', Edm.Int32) with sum as NotExecuted,"
&"cast(ResultOutcome ne 'None', Edm.Int32) with sum as Executed
)
)", null, [Implementation="2.0"])
in
Source
Cadeias de caracteres de substituição e detalhamento de consulta
Substitua as seguintes cadeias de caracteres por seus valores. Não inclua parênteses com a {} sua substituição. Por exemplo, se o nome da sua organização for "Fabrikam", substitua {organization} por Fabrikam, não {Fabrikam}.
{organization}- Nome da sua organização{project}- O nome do seu projeto de equipe, ou omitir "/{project}" completamente, para uma consulta entre projetos{testPlanTitle}- Título do seu plano de teste. Exemplo:Fabrikam test plan.{startDate}e{endDate}- Intervalo de datas de interesse. Pode introduzir as datas no formato AAAAMMDD. Por exemplo,20220815para 15 de agosto de 2022.
Detalhamento da consulta
A tabela a seguir descreve cada parte da consulta.
Parte da consulta
Descrição
filter((TestSuite/TestPlanTitle eq '{testPlanTitle}'))
Retornar dados apenas para o plano de teste selecionado. Você pode adicionar vários planos com uma cláusula como filter((TestSuite/TestPlanTitle eq '{testPlanTitle1}' ou TestSuite/TestPlanTitle eq '{testPlanTitle2}')). Você também pode aplicar quaisquer outros filtros relacionados a conjuntos de testes e configurações de teste aqui.
and (DateSK ge {startDate} and DateSK le {endDate})
Intervalo de datas de interesse. Você pode inserir as datas no YYYYMMDD formato.
/groupby((DateSK)
Agrupe os dados em compartimentos da mesma data. Ele produz um conjunto de valores por dia em determinado intervalo de datas.
/aggregate($count as TotalCount,
Agregar dados nos pontos de teste filtrados com a contagem como TotalCount.
cast(LastResultOutcome eq 'Passed', Edm.Int32) with sum as Passed,
Ao agregar, os pontos de teste type-cast com o resultado de execução mais recente "Passado" para 1 e resumem-nos como Passed métrica.
(Opcional) Renomear consulta
Você pode renomear o rótulo de consulta padrão, Query1, para algo mais significativo. Basta inserir um novo nome no painel Configurações de consulta.
Alterar o tipo de dados da coluna
No Editor do Power Query, selecione a TotalCount coluna e todas as outras colunas e, em seguida, selecione Tipo de Dados no menu Transformar e escolha Número Inteiro. Para saber mais sobre como alterar o tipo de dados, consulte Transformar dados do Analytics para gerar relatórios do Power BI, Transformar um tipo de dados de coluna.
(Opcional) Renomear campos de coluna
Você pode renomear campos de coluna. Por exemplo, você pode renomear a coluna NotApplicable para Not Applicable, ou TotalCount para Total Count. Para saber como, consulte Renomear campos de coluna.
Feche a consulta e aplique as alterações
Depois de concluir todas as suas transformações de dados, escolha Fechar & Aplicar no menu Início para salvar a consulta e retornar à guia Relatório no Power BI.
Criar o relatório de gráfico de área empilhada
No Power BI, em Visualizações, escolha o relatório de gráfico de área empilhada.
Arraste e solte DateSK no eixo X.
Arraste e solte Passed, Failed, Blocked, NotApplicable e NotExecuted no eixo Y.
Seu relatório deve ser semelhante à imagem a seguir.
Artigos relacionados
Comentários
Brevemente: Ao longo de 2024, vamos descontinuar progressivamente o GitHub Issues como mecanismo de feedback para conteúdos e substituí-lo por um novo sistema de feedback. Para obter mais informações, veja: https://aka.ms/ContentUserFeedback.
Submeter e ver comentários