Test Flakiness Rate - Definição do Glossário de CI/CD

A test flakiness rate mede com que frequência os testes falham de forma intermitente em código inalterado.

A test flakiness rate é a fração de execuções de teste que falham de forma intermitente em código inalterado, geralmente medida por teste ao longo de uma janela de execuções. Ela quantifica o quanto o não determinismo está corroendo a confiança no CI.

Acompanhar a instabilidade por teste permite que as equipes coloquem em quarentena os piores casos e priorizem correções, em vez de simplesmente repetir execuções que falharam.

Guias relacionados