Experiment Tracking - CI/CD用語集の定義

experiment trackingは各MLのrunのパラメータ、データ、メトリクス、artifactをログし、runを比較して再現できるようにします。

experiment trackingは、各machine learningのrunのパラメータ、コードのバージョン、データのバージョン、メトリクス、artifactを記録し、結果を比較して再現できるようにします。

trackingはアドホックなrunのフォルダをクエリ可能な履歴に変え、チームが最良のモデルを選び、それがどう作られたかを再現できるようにします。

何を記録するか

各runはhyperparameter、git commit、datasetのバージョン、評価メトリクス、そして生成されたモデルのartifactをログします。通常はMLflowやWeights and Biasesのようなツールを介して行います。