Brasil.IO: libertando dados públicos para mais democracia


Turicas aka Álvaro Justen


Universidade Metodista de São Paulo/SP

16 de outubro de 2019

$ whoami

Turicas, prazer! =)

Sigam-me os bons:

{twitter,
github,
youtube,
slideshare,
instagram}
/turicas

turicas@brasil.io

Slides em:
bit.ly/turicas-metodista

## Agenda - Dados abertos: introdução - Jornalismo de dados - Problemas - Ferramentas para trabalhar com dados - Brasil.IO

Software Livre & Python

(desde 2004/2005)

       

Dados Abertos

“ Dados abertos são dados que podem ser livremente usados, reutilizados e redistribuídos por qualquer pessoa - sujeitos, no máximo, à exigência de atribuição da fonte e compartilhamento pelas mesmas regras. ”
-- OpenData Handbook (definição de Open Definition)


Mais detalhes:

“ De acordo com o governo brasileiro, o controle social é a participação da sociedade civil nos processos de planejamento, acompanhamento, monitoramento e avaliação das ações da gestão pública e na execução das políticas e programas públicos. ”
-- Wikipedia

Operação Serenata de Amor

#civictech

Operação Serenata de Amor
serenata.ai

Rosie, a robô

Tweet de RosieDaSerenata
R$ 191 em um restaurante cujos pratos não custam R$ 40, deputado?
twitter.com/tOa_D/status/1058495655184871425

(em conjunto com Juan Torres, para correio24horas.com.br)
Acesse a matéria

(em conjunto com Giulliana Biaconi, para generonumero.media)
Leia a matéria

(em conjunto com Adriano Belisário, para apublica.org)
Acesse a matéria

Acesse a matéria

Acesse a matéria

Acesse a matéria

Aplicações Úteis

Eleições

Portal de Candidaturas do Poder360
(em conjunto com Voltdatalab, para poder360.com.br)
eleicoes.poder360.com.br

Era da Pós-verdade


por Martin Shovel

Pós-verdade

“ Distorção deliberada de uma realidade, com finalidade de criar e modelar a opinião pública e influenciar as atitudes sociais, em que os fatos objetivos têm menos influência que os apelos às emoções e às crenças pessoais. ”
-- Wikipedia
## MODELAR OPINIÃO PÚBLICA ### Movimento antivacinação ![Notícia sobre baixa taxa de vacinação de poliomielite no Brasil](images/vacina-polio.png) Fonte: [BBC Brasil](https://www.bbc.com/portuguese/brasil-41045273)
## CRENÇAS PESSOAIS ### Morte por sarampo (28/08/2019) ![Morte de sarampo no Brasil](images/tweet-sarampo.png) Fonte: [Twitter de Leilane Neubarth](https://twitter.com/LeilaneNeubarth/status/1166793024942301184)
## DISTORÇÃO DA REALIDADE ### Declaracões do Presidente do Brasil ![Aos Fatos: Declarações de Bolsonaro](images/aos-fatos-declaracoes-bolsonaro.png) Fonte: [Aos Fatos](https://aosfatos.org/todas-as-declarações-de-bolsonaro/)
## INFLUÊNCIA DE ATITUDES ### Queimadas na Amazônia ![Queimadas na Amazônia](images/queimadas-amazonia.jpg) Fonte: [Globo Rural](https://revistagloborural.globo.com/Noticias/noticia/2019/08/grupo-usou-whatsapp-para-convocar-dia-do-fogo-no-para.html)

Pós-verdade: a era da desinformação
bit.ly/turicas-pysul2019

Data Pipeline


schoolofdata.org/methodology

Viajando nos dados


Instagram @turicas

Maior parte do tempo dos projetos de análise de dados:

## Qualidade dos Dados ![](images/5-star-steps.png) [5stardata.info](http://5stardata.info/)

Dado pago! (???)

Estrelando: Receita Federal

Tweet de Turicas
https://twitter.com/turicas/status/1019272233095745537

Lentidão ao baixar (ETA: 4d)

Estrelando: Receita Federal


twitter.com/turicas/status/1114185311372873729

Formato Proprietário

Estrelando: Receita Federal

Dado disperso e não padronizado

Estrelando: Conselho Nacional de Justiça

Tweet de Turicas

Formato não estruturado

Estrelando: INEMA/BA

## Problemas de Usabilidade de Dados - **Formato** (qualidade técnica) - Exemplo: Boletim de balneabilidade em PDF (INEMA/BA) - **Dispersão** - Exemplo: Filiações partidárias em 945 ZIPs com CSVs (TSE) - **Quantidade** de dados - Exemplo: 18 milhões de sócios (RFB) - **Domínio** da área - Exemplo: o que é unidade eleitoral? (TSE)
## Soluções - **Educação tecnológica** - Do-it-yourself - Interdisciplinaridade - **Libertação de dados** - Dados menos dispersos - Formato aberto - **Melhorar ferramentas** - Software livre - **Pressão por dados melhores** - Dar visibilidade aos problemas - Usar a LAI

Educação Tecnológica

Curso Gratuito (3.000+ alunos)

Foto curso Python Knight Center
Fonte: Knight Center, Texas University
Veja os vídeos

Jornalismo de Dados

4.300+ estudantes!


Fonte: Knight Center, Texas University
Veja os vídeos

Python!


Acesse a matéria
xkcd Python
xkcd.com/353

Melhorar ferramentas

rows convert arquivo.pdf arquivo.csv Biblioteca rows convertendo PDF para CSV
github.com/turicas/balneabilidade-brasil
## Usablidade Libertação de dados resolve: - [x] Formato - [x] Dispersão - [ ] Quantidade de dados - [ ] Domínio da área

Brasil.IO

O Brasil em dados libertos

Logo Brasil.IO

Exemplos:

## Contribua com o Brasil.IO! ### [brasil.io/colabore](https://brasil.io/colabore) - Sugerindo otimizações no banco - Melhorando os scripts de coleta - Coletando novos datasets - Publicando tutoriais no [blog.brasil.io](https://blog.brasil.io/) - **Doando** no [apoia.se/brasilio](https://apoia.se/brasilio)

PythonBrasil 2019

PythonBrasil 2019
23 a 28 de outubro, Ribeirão Preto/SP
pythonbrasil.com.br

CODA.BR 2019

CODA.BR 2019
23 e 24 de novembro, São Paulo/SP
coda.escoladedados.org

Dúvidas?

“ Restringir acesso a dados públicos é elitizar a democracia. ”
-- Manifesto Brasil.IO

{twitter,
github,
youtube,
slideshare,
instagram}
/turicas

turicas@brasil.io

bit.ly/turicas-metodista