ETL - CI/CD用語集の定義

ETLはソースからデータを抽出し、中間層で変換し、完成した結果をターゲットのwarehouseにロードします。

ETL(Extract, Transform, Load)は、ソースからデータを取り出し、形を整えてから、その結果をターゲットのストアに書き込むパターンです。変換はloadステップの前に行われます。

ETLは古典的なbatch統合パターンです。変換はデータがデスティネーションに届く前に専用のエンジン上で実行されます。

ETL vs ELT

ETLでは変換がloadの前に、多くの場合は別のcompute層で実行されます。ELTではまず生データをロードし、warehouse内で変換します。elt-gl36を参照してください。