Embedded Files
Pipeline completo de engenharia de dados que processa informações de e-commerce brasileiro, desde a ingestão até visualizações analíticas.
🔍 Visão Geral
🔍 Visão Geral
Diagrama da arquitetura do projeto
🛠️ Stack Tecnológica
🛠️ Stack Tecnológica
1 - Extração
1 - Extração
Python é ideal para coletar dados de múltiplas fontes (APIs, bancos SQL, planilhas)
2 - Armazenamento
2 - Armazenamento
DuckDB é um banco leve, rápido e embutido (não requer servidor), perfeito para um Data Lakehouse simplificado.
3 - Transformação
3 - Transformação
dbt (data build tool) estrutura a modelagem dimensional (star schema) de forma modular e documentada.
4 - Visualização
4 - Visualização
Power BI consome os dados modelados pelo dbt diretamente do DuckDB (ou de arquivos Parquet).
📈Resultados
📃Linhagem de dados no dbt docs
📊Visualização analítica final
Dúvidas?
Dúvidas?
Entre em contato pelo e-mail luisadsfatec@hotmail.com para saber mais sobre o projeto
Page updated
Google Sites
Report abuse