Projeto ETL com Python e Google BigQuery

Extração: Coleta dados da API do IBGE.
Transformação: Normalização e limpeza dos dados JSON.
Carga: Envio dos dados para um dataset no BigQuery.

Este projeto realiza a extração de dados de uma API pública, transformação com Python/pandas e carga dos dados no Google BigQuery.

Tecnologias

# Instale dependências
pip install -r requirements.txt

# Execute a pipeline
python main.py

Name		Name	Last commit message	Last commit date
Latest commit History 8 Commits
README.md		README.md
config.py		config.py
etl_api_ibge_to_csv.ipynb		etl_api_ibge_to_csv.ipynb
extract.py		extract.py
load.py		load.py
main.py		main.py
transform.py		transform.py