basedosdados / pipelines
🔀 Orquestrador de fluxos de captura, ingestão e tratamento de dados da BD
☆35Updated this week
Alternatives and similar repositories for pipelines:
Users that are interested in pipelines are comparing it to the libraries listed below
- 🖥 Website oficial da BD☆25Updated this week
- Gerenciador de fluxos de captura e subida de dados no datalake da Prefeitura do Rio de Janeiro | https://docs.dados.rio/guia-desenvolvedo…☆36Updated 3 weeks ago
- 📊 Repositório de códigos simples e replicáveis das análises publicadas.☆107Updated last month
- ipeadatapy is a data and metadata extraction package made in Python using Ipeadata database official API. In it's essence it is an API wr…☆74Updated 2 months ago
- Fast Project Templates☆12Updated 4 years ago
- Airflow plugins for implementing data pipelines. | Plugins do Airflow para implementação de pipelines de dados.☆45Updated 4 months ago
- ☆51Updated last year
- Library to download, clean and analyze openly available datasets from Brazilian Universal health system, SUS.☆50Updated 2 years ago
- Library to download, clean and analyze openly available datasets from Brazilian Universal health system, SUS.☆182Updated 2 months ago
- A containerized Python framework for a better Data X development workflow. Where X = Science, Engineering, Analytics, etc.☆28Updated 3 years ago
- Dados sobre os planos de governo das eleições municipais de 2020☆30Updated 4 years ago
- Repositório com um tutorial simples e claro de Polars, biblioteca de análise de dados no Python, uma alternativa ao Pandas.☆38Updated 2 years ago
- Data Engineering made simple - An opinionated Data Engineering framework☆65Updated 11 months ago
- 📈 Python interface for the Brazilian Central Bank's Time Series Management System (SGS)☆75Updated 2 weeks ago
- ⚙️ Código de manutenção do datalake (metadados e pacotes de acesso) | 📖 Docs: https://basedosdados.github.io/sdk/☆400Updated this week
- This repository exemplifies a simple ELT process using delta to perform upsert and remove data files that aren't in the latest state of t…☆84Updated 3 years ago
- ☆25Updated 4 years ago
- A data engineering personal project for applying some of my skills☆19Updated 3 years ago
- ☆10Updated 2 years ago
- Módulo no Python para extração de dados mensais do CAGED (desagregado a nível de Município, Setor da Economia e Sexo)☆14Updated 2 years ago
- 🎲. Repositório de construção da API que alimenta as ferramentas do Coronacidades • This repo runs our API for Coronacidades tools.☆9Updated 3 years ago
- Censo de 1872 por município, disponibilizado pela Cedeplar, organizado em formato tidy☆30Updated 2 years ago
- ☆71Updated last year
- Introdução a séries temporais☆12Updated 4 years ago
- ☆44Updated 4 years ago
- A library to open DATASUS files (*.dbc) in Python☆34Updated last year
- Este repositório não recebe atualizações | Queremos descobrir onde os diários oficiais das prefeituras de todo o Brasil estão sendo publi…☆43Updated 2 years ago
- Análise de Dados Abertos da Prova Brasil 2011 com Airflow, S3, Redshift e Metabase☆16Updated last year
- Repositório do PoD MeetUp: "Data Science GeoEspacial no Python - Uma Introdução ao GIS".☆11Updated 4 years ago
- A survey of Brazilian states' and municipalities' transparency and open data portals, as well as institutional websites, obtained from se…☆61Updated last year