Test Set - Definição do Glossário de CI/CD

Um test set são dados usados exatamente uma vez no final para estimar o desempenho de um modelo finalizado sobre dados não vistos.

Um test set são dados reservados e tocados apenas uma vez, no final, para estimar como um modelo finalizado terá desempenho em dados realmente não vistos. Ele não pode influenciar nenhuma decisão de modelagem.

O test set é o exame final e honesto: usá-lo durante o desenvolvimento inflaria a pontuação relatada.

Use uma vez

Toda vez que você olha o test set e altera o modelo, você vaza informação. Reserve-o para uma única avaliação final antes do deploy.

Guias relacionados