Skip to content

jacolibiejac/pe-de-meia-transparency-project

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

5 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

📊 Pé-de-Meia Transparency Project

Este projeto automatiza a coleta e análise de dados do Programa Pé-de-Meia no Portal da Transparência.
O objetivo é construir uma pipeline de dados pública e reprodutível, utilizando Python, Selenium e Pandas, para consolidar milhões de registros em planilhas e permitir análises abertas.


🚀 Tecnologias utilizadas

  • Python 3.10+
  • Selenium → automação de navegador para exportação em massa
  • Requests → requisições HTTP / APIs
  • Pandas → tratamento e consolidação dos dados
  • Jupyter Notebook → análises gráficas e exploratórias

📂 Estrutura do Projeto

pe-de-meia-transparency-project/
│── data/                         # CSVs brutos e consolidados
│   ├── dados_portal_transparencia.csv
│   ├── dados_portal_transparencia_completo.csv
│
│── scripts/                      # Scripts principais (scraping/API)
│   ├── coletar_pe_de_meia_completo.py
│   ├── scraper_portal_transparencia.py
│   ├── scraper_simples.py
│   └── combinar_csvs.py
│
│── notebooks/
│   └── exploracao_dados.ipynb    # Notebook de análise
│
│── requirements.txt              # Dependências do projeto
│── README.md                     # Documentação principal
│── LICENSE                       # Licença do projeto (MIT)

About

Automação para coleta e análise de dados do programa Pé-de-Meia (Portal da Transparência), incluindo web scraping, APIs e tratamento em Python.

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

 
 
 

Contributors