Intro
Extract, transform, and load (ETL) and extract, load, and transform (ELT) are two data-processing approaches for analytics.
datasources
- applications
- sensors
- IT infrastructure
- 3-party data
operations
- filter
- map
- reduce
- sort
- clean
- etc…
etl
- ETL先按业务规则处理数据,再集中整合,需提前明确目标数据类型等
- ETL适用于结构化数据
- ETL前期规划复杂,成本更高 -ETL可能需定制安全方案
elt
- ELT先原样加载数据,后期按需转换。
- ELT直接将原始数据加载到数据仓库或数据湖,后续在目标系统内转换。
- ELT系统简单,成本低。
- ELT可利用数据仓库内置安全功能。