Posverdad: la era de desinformación
(y cómo Python puede ayurdarnos)


Turicas aka Álvaro Justen


PyCon LATAM 2019

31 de agosto de 2019

Puerto Vallarta/Jalisco, México

$ whoami

Turicas, mucho gusto =)

¡Síganme los buenos!

{twitter,
github,
youtube,
slideshare,
instagram,
telegram}
/turicas

turicas@brasil.io

Diapositivas en:
bit.ly/turicas-pylatam

✈️ ☕🌱👀 = 💖

Software Libre & Python

(desde 2004/2005)

       

Conferencias que organizo/organizé

# Agenda - Posverdad - Qué es? Ejemplos - Que podemos hacer? - Periodismo de datos - Datos abiertos - Ejemplos en vivo - [rows](https://pypi.org/project/rows) - [Brasil.IO](https://brasil.io/)
## Encuesta - Conoces el concepto de posverdad? - Primera conferencia de Python? - Empezando en Python? - Trabaja con datos? - Experiencia con datos de gobierno?

Era de la Posverdade


por Martin Shovel

Posverdad

“ la distorsión deliberada de una realidad, con el fin de crear y modelar la opinión pública e influir en las actitudes sociales, en la que los hechos objetivos tienen menos influencia que las apelaciones a las emociones y a las creencias personales ”
-- Wikipedia
## MODELAR OPINIÓN PÚBLICA ### Movimiento antivacunación ![Notícia sobre baixa taxa de vacinação de poliomielite no Brasil](images/vacina-polio.png) Fuente: [BBC Brasil](https://www.bbc.com/portuguese/brasil-41045273)
## CREENCIAS PERSONALES ### Muerte en Brasil (último miércoles) ![Morte de sarampo no Brasil](images/tweet-sarampo.png) Fuente: [Twitter de Leilane Neubarth](https://twitter.com/LeilaneNeubarth/status/1166793024942301184)
## DISTORSIÓN DE LA REALIDAD ### Declaraciones del presidente de Brasil ![Aos Fatos: Declarações de Bolsonaro](images/aos-fatos-declaracoes-bolsonaro.png) Fuente: [Aos Fatos](https://aosfatos.org/todas-as-declarações-de-bolsonaro/)
## INFLUENCIA DE ACTITUDES ### Quemadas en Amazonia ![Queimadas na Amazônia](images/queimadas-amazonia.jpg) Fuente: [Globo Rural](https://revistagloborural.globo.com/Noticias/noticia/2019/08/grupo-usou-whatsapp-para-convocar-dia-do-fogo-no-para.html)
## Estrategia: [Fear, uncertainty and doubt](https://en.wikipedia.org/wiki/Fear,_uncertainty,_and_doubt) ### 2001 / 2016 ![Steve Ballmer says Linux is a cancer/Microsoft loves Linux](images/ballmer-microsoft.png) Fuentes: [The Register](https://www.theregister.co.uk/2001/06/02/ballmer_linux_is_a_cancer/) y [Microsoft Cloud Blogs](https://cloudblogs.microsoft.com/windowsserver/2015/05/06/microsoft-loves-linux/)
## MAXIMIZANDO DESIGUALDADES ## Sesgo Algorítmico ![The New York Times on Algorithmic Biases](images/nyt-algorithimic-biases.png) Fuente: [The New York Times](https://www.nytimes.com/2015/07/10/upshot/when-algorithms-discriminate.html)
## Recuerdas Cambridge Analytica? ![Cambridge Analytica Scandal](images/cambridge-analytica.png) Fuente: [The Guardian](https://www.theguardian.com/news/2018/mar/17/cambridge-analytica-facebook-influence-us-election)
## VISIBILITY COUNTS ### (o: histórias que te cuentan) ### DON'T FOLLOW THE HYPE ![Forbes about big data](images/forbes-big-data.png) Fuente: [Forbes](https://www.forbes.com/sites/nicolemartin1/2019/08/30/how-healthcare-is-using-big-data-and-ai-to-cure-disease/)

MENTIRAS PERSONALIZADAS

Deep fakes


Mark Zuckerberg ‘deepfake’ will remain online
## Sugerencias de Contenido ### Películas/Documentales - [Die Welle](https://pt.wikipedia.org/wiki/A_Onda_(filme) - [The Stanford Prison Experiment](https://en.wikipedia.org/wiki/The_Stanford_Prison_Experiment_(film) - [La Tierra es Plana](https://www.netflix.com/title/81015076) - [TED James Randi](https://www.youtube.com/watch?v=c0Z7KeNCi7g)
## ¿Por qué? - Estrategia: [Teoría de juegos](https://es.wikipedia.org/wiki/Teoría_de_juegos) - Interpretación: [Hermenéutica](https://es.wikipedia.org/wiki/Hermenéutica) - "Brain bugs": [Disonancia cognitiva](https://es.wikipedia.org/wiki/Disonancia_cognitiva) - Alta conectividad (Internet): [3.5 degrees of separation](https://research.fb.com/blog/2016/02/three-and-a-half-degrees-of-separation/)

¡La gente cree en todo!

Falta pensamiento científico

## Explorar los Defectos ### Neuromarketing = Brain bugs + Hacking ![Bug or feature?](images/bug-feature.jpg)
# Que podemos hacer?
## Entiendo que somos parte del problema - Producimos tecnología: tenemos **responsabilidad por su utilización** - Educación tecnológica - Confiamos **sin verificar**, necesitamos + educación en medios: - Verificar, verificar, verificar - No dar visibilidad a las mentiras - Dar visibilidad a los datos (referencias/fuentes originales)

Programación para Periodistas

3000+ estudiantes!


Fuente: Knight Center, Texas University

Datos Abiertos

“ Son datos que pueden ser utilizados, reutilizados y redistribuidos libremente por cualquier persona, y que se encuentran sujetos, cuando más, al requerimiento de atribución y de compartirse de la misma manera en que aparecen. ”
-- OpenData Handbook


Más detalles:

## Importancia de los datos abiertos - Transparencia - Lucha contra la corrupción - Control social

Control Social: Ejemplo

Rosie, la robot

Tweet de RosieDaSerenata
R$ 191 en un restaurante cuyo almuerzo costa R$40
Fuente: Twitter / Proyecto: serenata.ai
# Periodismo de Datos
## Políticos dueños de radiodifusoras ![Políticos donos de radiodifusoras](images/donos-de-radio-congresso.png) Fuente: [Reino da Desinformação / Gênero e Número](http://www.reinodadesinformacao.com.br)
## Ilegalidad (Ley de Inclusión de Mujeres en Política) ![Gênero e Número - mulheres sem votos](images/gn-2018.png) Fuente: [Gênero e Número](http://www.generonumero.media/candidatura-semvoto-eleicoes2018/)
## Sorteo de Procesos (Corte Suprema Federal) ![Matéria STF](images/sorteio-supremo.png) Fuente: [A Pública](https://apublica.org/2018/01/sorteio-do-supremo-e-caixa-preta/)
## Odebrecht y Políticos ![Odebrecht escândalo](images/doacoes-3.png) Fuente: [The Intercept Brasil](https://theintercept.com/2017/09/28/mesmo-apos-lava-jato-familia-odebrecht-manteve-doacoes-de-campanha-em-2016/)
## Usted no necesitas una **buzzword** para crear impacto en la sociedad - Hecho con Python + SQL - (sin pandas, sin big data, sin ML...) - Charla ["Usted (problamente) no necesita de big data" (en Portugués)](https://blog.brasil.io/2019/07/02/voce-provavelmente-nao-precisa-de-big-data/)

Data pipeline


Fuente: School of Data

Mayor parte del trabajo con datos abiertos

Obtener, verificar, limpiar



## Usabilidad de Datos: Problemas - **Formato** (calidad técnica) - Ejemplo: archivos en PDF - **Dispersión** - Ejemplo: 1000s de archivos para bajar - **Cantidad** de datos - Ejemplo: dataset com milliones de registros - **Dominio** del área - Ejemplo: dataset sin metadados

Democracia?

“ Restringir el acceso a los datos públicos es elitizar la democracia. ”
Fuente: Manifesto Brasil.IO

Cómo podemos ayudar?

pip install rows Repositório da biblioteca rows no GitHub
github/turicas/rows

Ejempo: CSV

brasil.csv

import rows
(codificación en vivo)

Ejemplo: HTML

## Interfaz de línea de comando (CLI) - `rows print https://www.sports-reference.com/olympics/sports/` - `rows print https://www.sports-reference.com/olympics/countries/BRA/summer/2016/` - `rows convert archivo.html archivo.csv`
### Ejemplo: PDF ### `rows convert file.pdf file.csv` ``` URL="https://reporterbrasil.org.br/wp-content/uploads/2016/12/listadetransparencia_setembro_2015.pdf" rows convert -i page_numbers=1 $URL trabajo-esclavo.csv ```
### Ejemplo: rows query ``` URL="https://www.sports-reference.com/olympics/sports/" SQL="SELECT AVG(countries) FROM table1" rows query "$SQL" "$URL" ```
### Ejemplo: `rows pgimport` - `rows pgimport (...ejemplo mibici...)`
Tweet de Turicas
Fuente: Twitter de turicas
Tweet de Turicas
Fuente: Twitter de turicas
## Usabilidad: 2/4 - [x] **Formato** - [x] **Dispersión** - [ ] **Cantidad** de datos - [ ] **Dominio** del área

Brasil.IO

Datos públicos brasileños accesibles

Brasil.IO
github/turicas/brasil.io
brasil.io/api/datasets
## Usabilidad: 4/4 - [x] **Formato** - [x] **Dispersión** - [x] **Cantidad** de datos - [x] **Dominio** del área
## Cómo? - Scripts: - [Python3](https://www.python.org/) - [scrapy](https://scrapy.org) - [rows](https://github.com/turicas/rows) - [sqlite3](https://docs.python.org/3/library/sqlite3.html) - Backend: - [Python3](https://www.python.org/) - [Django](https://www.djangoproject.com/) - [PostgreSQL](https://www.postgresql.org/) - [Neo4J](https://neo4j.com/) - Servidores: OVH (Canada) - PaaS: dokku
## Proyecto Colaborativo ![Contribuyentes de Brasil.IO](images/brasilio-contribuidores.png)
## [Brasil.IO](https://brasil.io/) ### Maneras de Contribuir - [github.com/turicas/brasil.io/issues](https://github.com/turicas/brasil.io/issues) - Creando scrapers - Charlando: [chat.brasil.io](https://chat.brasil.io/) - Donación: [apoia.se/brasilio](https://apoia.se/brasilio)

Preguntas?

"Restringir el acceso a los datos públicos es elitizar la democracia."

{twitter,
github,
youtube,
slideshare,
instagram,
telegram}
/turicas

turicas@brasil.io

bit.ly/turicas-pylatam