Posverdad: la era de desinformación
(y cómo Python puede ayurdarnos)
Turicas aka Álvaro Justen
31 de agosto de 2019
Puerto Vallarta/Jalisco, México
$ whoami
Turicas, mucho gusto =)
¡Síganme los buenos!
✈️ ☕🌱👀 = 💖
Software Libre & Python
(desde 2004/2005)
Conferencias que organizo/organizé
# Agenda
- Posverdad
- Qué es? Ejemplos
- Que podemos hacer?
- Periodismo de datos
- Datos abiertos
- Ejemplos en vivo
- [rows](https://pypi.org/project/rows)
- [Brasil.IO](https://brasil.io/)
## Encuesta
- Conoces el concepto de posverdad?
- Primera conferencia de Python?
- Empezando en Python?
- Trabaja con datos?
- Experiencia con datos de gobierno?
Posverdad
“
la distorsión deliberada de una realidad, con el fin de
crear y modelar la opinión pública e influir en las
actitudes sociales, en la que los hechos objetivos tienen
menos influencia que las apelaciones a las emociones y a las
creencias personales
”
-- Wikipedia
## MODELAR OPINIÓN PÚBLICA
### Movimiento antivacunación

Fuente: [BBC Brasil](https://www.bbc.com/portuguese/brasil-41045273)
## CREENCIAS PERSONALES
### Muerte en Brasil (último miércoles)

Fuente: [Twitter de Leilane Neubarth](https://twitter.com/LeilaneNeubarth/status/1166793024942301184)
## DISTORSIÓN DE LA REALIDAD
### Declaraciones del presidente de Brasil

Fuente: [Aos Fatos](https://aosfatos.org/todas-as-declarações-de-bolsonaro/)
## INFLUENCIA DE ACTITUDES
### Quemadas en Amazonia

Fuente: [Globo Rural](https://revistagloborural.globo.com/Noticias/noticia/2019/08/grupo-usou-whatsapp-para-convocar-dia-do-fogo-no-para.html)
## Estrategia: [Fear, uncertainty and doubt](https://en.wikipedia.org/wiki/Fear,_uncertainty,_and_doubt)
### 2001 / 2016

Fuentes: [The Register](https://www.theregister.co.uk/2001/06/02/ballmer_linux_is_a_cancer/) y [Microsoft Cloud Blogs](https://cloudblogs.microsoft.com/windowsserver/2015/05/06/microsoft-loves-linux/)
## MAXIMIZANDO DESIGUALDADES
## Sesgo Algorítmico

Fuente: [The New York Times](https://www.nytimes.com/2015/07/10/upshot/when-algorithms-discriminate.html)
## Recuerdas Cambridge Analytica?

Fuente: [The Guardian](https://www.theguardian.com/news/2018/mar/17/cambridge-analytica-facebook-influence-us-election)
## VISIBILITY COUNTS
### (o: histórias que te cuentan)
### DON'T FOLLOW THE HYPE

Fuente: [Forbes](https://www.forbes.com/sites/nicolemartin1/2019/08/30/how-healthcare-is-using-big-data-and-ai-to-cure-disease/)
## Sugerencias de Contenido
### Películas/Documentales
- [Die Welle](https://pt.wikipedia.org/wiki/A_Onda_(filme)
- [The Stanford Prison Experiment](https://en.wikipedia.org/wiki/The_Stanford_Prison_Experiment_(film)
- [La Tierra es Plana](https://www.netflix.com/title/81015076)
- [TED James Randi](https://www.youtube.com/watch?v=c0Z7KeNCi7g)
## ¿Por qué?
- Estrategia: [Teoría de juegos](https://es.wikipedia.org/wiki/Teoría_de_juegos)
- Interpretación: [Hermenéutica](https://es.wikipedia.org/wiki/Hermenéutica)
- "Brain bugs": [Disonancia cognitiva](https://es.wikipedia.org/wiki/Disonancia_cognitiva)
- Alta conectividad (Internet): [3.5 degrees of separation](https://research.fb.com/blog/2016/02/three-and-a-half-degrees-of-separation/)
¡La gente cree en todo!
Falta pensamiento científico
## Explorar los Defectos
### Neuromarketing = Brain bugs + Hacking

## Entiendo que somos parte del problema
- Producimos tecnología: tenemos **responsabilidad por su utilización**
- Educación tecnológica
- Confiamos **sin verificar**, necesitamos + educación en medios:
- Verificar, verificar, verificar
- No dar visibilidad a las mentiras
- Dar visibilidad a los datos (referencias/fuentes originales)
Datos Abiertos
“
Son datos que pueden ser utilizados, reutilizados y
redistribuidos libremente por cualquier persona, y que se
encuentran sujetos, cuando más, al requerimiento de atribución y
de compartirse de la misma manera en que aparecen.
”
-- OpenData
Handbook
Más detalles:
## Importancia de los datos abiertos
- Transparencia
- Lucha contra la corrupción
- Control social
Control Social: Ejemplo
Rosie, la robot
R$ 191 en un restaurante cuyo almuerzo costa R$40
Fuente: Twitter
/ Proyecto: serenata.ai
## Políticos dueños de radiodifusoras

Fuente: [Reino da Desinformação / Gênero e Número](http://www.reinodadesinformacao.com.br)
## Ilegalidad (Ley de Inclusión de Mujeres en Política)

Fuente: [Gênero e Número](http://www.generonumero.media/candidatura-semvoto-eleicoes2018/)
## Sorteo de Procesos (Corte Suprema Federal)

Fuente: [A Pública](https://apublica.org/2018/01/sorteio-do-supremo-e-caixa-preta/)
## Odebrecht y Políticos

Fuente: [The Intercept Brasil](https://theintercept.com/2017/09/28/mesmo-apos-lava-jato-familia-odebrecht-manteve-doacoes-de-campanha-em-2016/)
## Usted no necesitas una **buzzword** para crear impacto en la sociedad
- Hecho con Python + SQL
- (sin pandas, sin big data, sin ML...)
- Charla ["Usted (problamente) no necesita de big data" (en Portugués)](https://blog.brasil.io/2019/07/02/voce-provavelmente-nao-precisa-de-big-data/)
Mayor parte del trabajo con datos abiertos
Obtener, verificar, limpiar
## Usabilidad de Datos: Problemas
- **Formato** (calidad técnica)
- Ejemplo: archivos en PDF
- **Dispersión**
- Ejemplo: 1000s de archivos para bajar
- **Cantidad** de datos
- Ejemplo: dataset com milliones de registros
- **Dominio** del área
- Ejemplo: dataset sin metadados
Democracia?
“
Restringir el acceso a los datos públicos es elitizar la
democracia.
”
Fuente: Manifesto Brasil.IO
Ejempo: CSV
brasil.csv
import rows
(codificación en vivo)
Ejemplo: HTML
## Interfaz de línea de comando (CLI)
- `rows print https://www.sports-reference.com/olympics/sports/`
- `rows print https://www.sports-reference.com/olympics/countries/BRA/summer/2016/`
- `rows convert archivo.html archivo.csv`
### Ejemplo: PDF
### `rows convert file.pdf file.csv`
```
URL="https://reporterbrasil.org.br/wp-content/uploads/2016/12/listadetransparencia_setembro_2015.pdf"
rows convert -i page_numbers=1 $URL trabajo-esclavo.csv
```
### Ejemplo: rows query
```
URL="https://www.sports-reference.com/olympics/sports/"
SQL="SELECT AVG(countries) FROM table1"
rows query "$SQL" "$URL"
```
### Ejemplo: `rows pgimport`
- `rows pgimport (...ejemplo mibici...)`
## Usabilidad: 2/4
- [x] **Formato**
- [x] **Dispersión**
- [ ] **Cantidad** de datos
- [ ] **Dominio** del área
## Usabilidad: 4/4
- [x] **Formato**
- [x] **Dispersión**
- [x] **Cantidad** de datos
- [x] **Dominio** del área
## Cómo?
- Scripts:
- [Python3](https://www.python.org/)
- [scrapy](https://scrapy.org)
- [rows](https://github.com/turicas/rows)
- [sqlite3](https://docs.python.org/3/library/sqlite3.html)
- Backend:
- [Python3](https://www.python.org/)
- [Django](https://www.djangoproject.com/)
- [PostgreSQL](https://www.postgresql.org/)
- [Neo4J](https://neo4j.com/)
- Servidores: OVH (Canada)
- PaaS: dokku
## Proyecto Colaborativo

## [Brasil.IO](https://brasil.io/)
### Maneras de Contribuir
- [github.com/turicas/brasil.io/issues](https://github.com/turicas/brasil.io/issues)
- Creando scrapers
- Charlando: [chat.brasil.io](https://chat.brasil.io/)
- Donación: [apoia.se/brasilio](https://apoia.se/brasilio)
Preguntas?
"Restringir el acceso a los datos públicos es elitizar la democracia."