O Que É uma Baseline Comparison?
Uma baseline comparison mede uma versão candidata contra uma baseline, tipicamente a versão estável atual, rodando sob a mesma carga e ambiente. Ao comparar as duas lado a lado, ela atribui qualquer diferença de métrica à mudança, e não a padrões de tráfego ou hora do dia. É o núcleo de uma boa análise de canary.
Por que isso importa
Julgar uma nova versão contra thresholds absolutos confunde regressões reais com variação normal. Comparar com uma baseline ao vivo controla esses fatores externos.
Guias relacionados
What Is Automated Canary Judgment?Automated canary judgment is software that decides whether a canary release is healthy by comparing its metri…
What Is a Statistical Significance Gate?A statistical significance gate flags a canary difference as real only when it is unlikely to be random noise…
What Is an Error Rate Threshold Gate?An error rate threshold gate blocks or rolls back a release when the share of failed requests rises above a s…