Brasil.IO: Dados Abertos para mais Democracia


Turicas aka Álvaro Justen


PythonBrasil[14]

20 de outubro de 2018 - Natal/RN

$ whoami

Turicas, prazer! =)

Sigam-me os bons:

{twitter,
github,
youtube,
slideshare,
instagram,
telegram}
/turicas

turicas@brasil.io

bit.ly/turicas-pybr14


escoladedados.org


impacto.jor.br

Brasil.IO

O Brasil em dados libertos

Logo Brasil.IO

Software Livre & Python

Desde 2004/2005

       

# Agenda - **Dados abertos** - Transparência - Democracia? - Lei de Acesso à Informação - Funil de dados - **[Brasil.IO](https://brasil.io/)** - O que é - Demonstração - Como? - Como colaborar

Dados Abertos

“ Dados abertos são dados que podem ser livremente usados, reutilizados e redistribuídos por qualquer pessoa - sujeitos, no máximo, à exigência de atribuição da fonte e compartilhamento pelas mesmas regras. ”
-- OpenData Handbook (definição de Open Definition)


Mais detalhes:

“ [A CGU] acredita que a transparência é o melhor antídoto contra corrupção, dado que ela é mais um mecanismo indutor de que os gestores públicos ajam com responsabilidade.
Uma gestão pública transparente permite à sociedade, com informações, colaborar no controle das ações de seus governantes, com intuito de checar se os recursos públicos estão sendo usados como deveriam. ”
-- CGU.gov.br

Controle Social

“ De acordo com o governo brasileiro, o controle social é a participação da sociedade civil nos processos de planejamento, acompanhamento, monitoramento e avaliação das ações da gestão pública e na execução das políticas e programas públicos. ”
-- Wikipedia

Inovação Cívica - Exemplo

Operação Serenata de Amor

Operação Serenata de Amor
serenata.ai

Data Pipeline


schoolofdata.org/methodology

Nem sempre o dado está disponível


twitter.com/turicas/status/1049346826355335169

vitimasdaintolerancia.org

Nem sempre o dado está disponível [2]

twitter.com/turicas/status/1019272233095745537

Data Pipeline


schoolofdata.org/methodology

Maior parte do tempo dos projetos de análise de dados:

## Houston, we have a problem... ### Qualidade dos Dados ![](images/5-star-steps.png) [5stardata.info](http://5stardata.info/)

Trabalhando com Dados Públicos



## Acessibilidade: Problemas - **Formato** (qualidade técnica) - Exemplo: Boletim de balneabilidade em PDF (INEMA/BA) - **Dispersão** - Exemplo: Filiações partidárias em 945 ZIPs com CSVs (TSE) - **Quantidade** de dados - Exemplo: 18 milhões de sócios (RFB) - **Domínio** da área - Exemplo: o que é unidade eleitoral? (TSE)
“ Democracia é um regime político em que todos os cidadãos elegíveis participam igualmente — diretamente ou através de representantes eleitos — na proposta, no desenvolvimento e na criação de leis, [...]
Ela abrange as condições sociais, econômicas e culturais que permitem o exercício livre e igual da autodeterminação política. ”
-- Wikipedia
“ Restringir acesso a dados públicos é elitizar a democracia. ”
-- Manifesto Brasil.IO
“ Política denomina-se a arte ou ciência da organização, direção e administração de nações ou Estados; a aplicação desta ciência aos assuntos da nação [...]. Nos regimes democráticos, a ciência política é a atividade dos cidadãos que se ocupam dos assuntos públicos com seu voto ou com sua militância. ”
-- Wikipedia
## Libertação de Dados: ### Resolver os problemas de **formato** e **dispersão**

balneabilidade.inema.ba.gov.br

t.me/addstickers/ddj-stickeados

rows convert arquivo.pdf arquivo.csv

Biblioteca rows convertendo PDF para CSV
Repositório do script de coleta dos dados do INEMA-BA balneabilidade-bahia
github/turicas/balneabilidade-bahia
Tweet de Turicas
twitter.com/turicas/status/943176715672711168
Tweet de Turicas
twitter.com/turicas/status/959120200976224262
Tweet de Turicas
twitter.com/turicas/status/960678777096425472
## Acessbilidade: 2/4 - [x] **Formato** - [x] **Dispersão** - [ ] **Quantidade** de dados - [ ] **Domínio** da área

Brasil.IO

O Brasil em dados libertos

Logo Brasil.IO
## Acessbilidade: 4/4 - [x] **Formato** - [x] **Dispersão** - [x] **Quantidade** de dados - [x] **Domínio** da área
## Como? - Scripts: - [Python3](https://www.python.org/) - [scrapy](https://scrapy.org) - [rows](https://github.com/turicas/rows) - Análises: - [sqlite3](https://docs.python.org/3/library/sqlite3.html) - Backend: - [Python3](https://www.python.org/) - [Django](https://www.djangoproject.com/) - [PostgreSQL](https://www.postgresql.org/) - [Neo4J](https://neo4j.com/) - Hospedagem: DigitalOcean (migrando para OVH) - Plataforma: dokku
Repositório do Brasil.IO no GitHub
github/turicas/brasil.io
# Brasil.IO - Quem está usando?

Leia a matéria

Acesse a matéria

Acesse a matéria

Acesse a matéria

eleicoes.poder360.com.br

perfilpolitico.serenata.ai

transparenciapartidaria.org
## [Brasil.IO](https://brasil.io/) ### Como Colaborar? - Código da plataforma: [github.com/turicas/brasil.io/issues](https://github.com/turicas/brasil.io/issues) - Scripts: melhorando os atuais e criando novos - Sugerindo novos datasets: [brasil.io/datasets/sugira](https://brasil.io/datasets/sugira) - Compartilhando ideias: [chat.brasil.io](https://chat.brasil.io/) - **Doando: [apoia.se/brasilio](https://apoia.se/brasilio)**

coda.escoladedados.org

Cerveja com Dados (meetup.com)

t.me/python_pr

Logo PythonSul
pythonsul.org
PythonSul 2019 em Curitiba

?

Happy hacking!


{twitter,
github,
youtube,
slideshare,
instagram,
telegram}
/turicas

turicas@brasil.io


bit.ly/turicas-pybr14