jamirpradojunior / ETL_pipeline_tick_data_B3
Este código busca exemplificar um pipeline ETL (Extract, Transform, Load) usando Python. Mantive o formato .ipynb (notebook) para facilitar o acompanhamento da rotina por iniciantes. Ele está dividido em três etapas: 1) Extração de múltiplos dados via webscraping; 2) Transformação dos dados; 3) Carregar os dados já estrurados para um database;
☆17Updated 4 months ago
Related projects ⓘ
Alternatives and complementary repositories for ETL_pipeline_tick_data_B3
- Estrutura completa para iniciar um projeto de dados com Python, abrangendo ambiente, git, desenvolvimento, testes e documentação.☆85Updated 3 weeks ago
- ELT dos voos da ANAC, utilizando Dataflow com Apache Beam e BigQuery☆12Updated 5 months ago
- Projeto de construção de datalake do zero☆74Updated 2 months ago
- This repository exemplifies a simple ELT process using delta to perform upsert and remove data files that aren't in the latest state of t…☆73Updated 2 years ago
- Pipeline ETL utilizando Pandera, pytest e CI☆9Updated 5 months ago
- Repositório com um tutorial simples e claro de Polars, biblioteca de análise de dados no Python, uma alternativa ao Pandas.☆38Updated last year
- ☆140Updated 10 months ago
- Repositório central do segundo Workshop☆15Updated last year
- Data pipeline to extract and provide Brazil inflation data☆11Updated 4 months ago
- Inferência Causal para os Corajosos e Verdadeiros. Uma abordagem divertida, mas rigorosa, para aprender sobre estimativa de impacto e cau…☆79Updated 5 months ago
- Translation to brazilian portuguese of the book Build a Reproducible and Maintainable Data Science Project from Khuyen Tran author.☆54Updated 4 months ago
- Curso de Pandas criado em conjunto com o Instituo Aaron Swartz☆75Updated 8 months ago
- Notebooks Utilizados nos Vídeos do Youtube☆31Updated 2 years ago
- Portfólio com análises e projetos de Data Science em Python☆107Updated 3 months ago
- ☆71Updated last year
- Desafio 5DataGlowUp☆20Updated last year
- Projeto de Dados para Data Science do início ao fim☆49Updated 3 months ago
- ☆57Updated 2 years ago
- ☆79Updated 3 months ago
- Projeto de simulação de ingestão, tratamento e analise de dados do Ministério da Cultura☆45Updated 7 months ago
- Este repositório foi cuidadosamente criado para fornecer uma extensa coleção de consultas SQL que visam facilitar o trabalho dos analista…☆18Updated 4 months ago
- Repositório no Bootcamp de Engenharia de Dados da Stack Academy.☆44Updated last year
- This repository contains the solution for a business case problem with respect to fraud detection.☆10Updated 3 years ago
- Desenvolvimento de um Scraper para obtenção de vagas.☆15Updated last year
- Formação Engenheiro de Dados Cloud e Big Data (Azure & DataBricks)☆16Updated last year
- ☆17Updated 7 months ago
- Projeto de Machine Learning do início ao fim no contexto de um e-commerce☆226Updated 6 months ago
- ☆44Updated 2 years ago
- Projeto Evangelizando SQL☆24Updated last year