Data Warehouse - CI/CD用語集の定義
data warehouseは、analyticsやレポートで使われる構造化されクレンジングされたデータのためのクエリ最適化された中央ストアです。
data warehouseは、構造化されクレンジングされたデータに対する分析クエリ向けに最適化された中央ストアです。列指向ストレージを使い、大きなテーブル全体の集計を高速に実行します。
warehouseはデータスタックのモデル化された信頼できる層を保持します。pipelineがそこにデータを供給し、アナリストがそれをクエリします。
Schema on write
warehouseはデータが書き込まれるときにschemaを強制し、高速なSQL集計のために列指向で保存します。これは、schemaを読み取り時まで遅延させる生のファイルストアとは異なります。
関連ガイド
ELT - CI/CD Glossary DefinitionELT: ELT (Extract, Load, Transform) loads raw data into a warehouse first, then transforms it in place using…
ETL - CI/CD Glossary DefinitionETL: ETL (Extract, Transform, Load) is a pattern that pulls data from sources, reshapes it, then writes the r…
Data Transformation - CI/CD Glossary DefinitionData Transformation: Data transformation is the step that cleans, reshapes, joins, and aggregates raw data in…