ELT
Categoria
Dados e Analytics
ELT (Extract, Load, Transform) e uma variacao moderna do ETL que primeiro carrega os dados brutos no destino e depois realiza as transformacoes. Aproveita o poder computacional de Data Warehouses na nuvem para processar transformacoes diretamente no destino.
Categoria
Dados e Analytics
O que e ELT
ELT e uma abordagem de integracao de dados que inverte a ordem das etapas tradicionais do ETL. Em vez de transformar os dados antes de carrega-los, o ELT primeiro extrai e carrega os dados brutos no destino, e entao aplica as transformacoes utilizando o poder computacional do proprio destino.
Por que ELT surgiu:
- Data Warehouses na nuvem oferecem poder computacional massivo
- Armazenamento em nuvem e barato e escalavel
- Transformar no destino e mais simples e rapido de iterar
- Dados brutos ficam preservados para reprocessamento
Stack ELT moderno:
- Extract Load: Fivetran, Airbyte, Stitch
- Transform: dbt (data build tool)
- Destino: Snowflake, BigQuery, Redshift
Vantagens sobre ETL:
- Implementacao mais rapida
- Dados brutos sempre disponiveis
- Transformacoes versionadas e testaveis
A Trilion adota a abordagem ELT para projetos modernos de dados, aproveitando ferramentas como dbt para criar transformacoes SQL modulares, testaveis e documentadas.
