LALI - SOCIVIL Red de Iniciativas Ciudadanas Latinoamericanas
Captura y visualización de datos abiertos para acciones ciudadanas
-
Upload
unai-aguilera -
Category
Technology
-
view
2.452 -
download
1
description
Transcript of Captura y visualización de datos abiertos para acciones ciudadanas
![Page 1: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/1.jpg)
Captura y visualización de datos abiertos para acciones ciudadanas
Unai [email protected]
@unaguil
I Jornada de Periodismo de Datos y Open DataUniversidad de Deusto, Donostia
24 de mayo de 2013
![Page 2: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/2.jpg)
Periodismo
Recopilar
Sintetizar
Publicar
Información de actualidad
Facilitar acceso al "lector"
![Page 3: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/3.jpg)
"When information was scarce, most of our efforts were devoted to hunting and gathering. Now that information is abundant, processing is more important."
Philip Meyer, Professor Emeritus, University of North Carolina at Chapel Hill
"The unifying goal is a journalistic one: providing information and analysis to help inform us all about important issues of the day."
Aron Pilhofer, New York Times
"It used to be that you would get stories by chatting to people in bars, and it still might be that you’ll do it that way sometimes. But now it’s also going to be about poring over data and equipping yourself with the tools to analyze it and picking out what’s interesting."
Tim Berners-Lee, founder of the World Wide Web
Periodismo de datos
![Page 4: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/4.jpg)
Do not Harm, Las Vegas Sun (2010)http://www.lasvegassun.com/hospital-care/
2,9 millones de facturas analizadas
Detectados 3600 errores prevenibles
Resultado
6 modificaciones ley sanitaria
![Page 5: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/5.jpg)
Iraq War Logs, Associated Presshttp://overview.ap.org/blog/2010/12/a-full-text-visualization-of-the-iraq-war-logs/
11,616 SIGACT informes desde diciembre 2006
Búsqueda de palabras relacionadas
Clusterización
Enfatizar visualmente la estructura
![Page 6: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/6.jpg)
El indultómetro, Fundación Civiohttp://www.elindultometro.es/
Uso y posible abuso de la ley de indulto
Información del BOE desde 1996
Análisis gráfico
Tiempo medio de indulto
Histórico de indultos
Indultos destacados
![Page 7: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/7.jpg)
Fuentes
Procesar
Visualizar
Flujo de trabajoSelecciónFiabilidadPre-proceso
PatronesRelacionesRazonar
ResumirFacilitarAtraer
![Page 8: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/8.jpg)
¿Por dónde empezamos?
![Page 9: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/9.jpg)
Catálogos de datosDatos abiertos
http://datahub.io/
http://opendata.euskadi.net/
http://datacatalogs.org/
Empresas privadas
http://datamarket.com/Datos abiertos y de pago
![Page 10: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/10.jpg)
Búsqueda de datosBuscador
Proceso más costoso
Conjuntos de datos duplicados
Sin catalogar
Origen dudoso
Licencias de uso
desempleo filetype:CSV
Tipo de fichero
desempleo filetype:XLS
desempleo filetype:RDF desempleo filetype:PDF
![Page 11: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/11.jpg)
De personas y máquinasOrientada a personas
Representación visual (HTML + CSS)
Documentos PDF
Difíciles de procesar (PDF Miner)
API web
http://www.justizia.net/
Web scraping
Scripting
Python+Beautiful Soap
Ejemplo
https://github.com/RHoK-Bilbao/desahucios
![Page 12: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/12.jpg)
Machine readable dataListado personas desaparecidas durante la Guerra Civil y el Franquismo (9600 entradas)
Fuente de datos: Justicia y Administración Pública. Gobierno Vasco
http://opendata.euskadi.net/w79-contdata/es/contenidos/ds_general/personas_desaparecidas/es_desapare/personas_desaparecidas.html
Nombre
Vecindad
Lugar muerte
Fecha muerte
Causa
Datos
¿Qué podemos preguntar?
![Page 13: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/13.jpg)
Google Fusion TablesListado personas desaparecidas durante la Guerra Civil y el Franquismo (solo 300 primeras / 9600 entradas)Fuente de datos: Justicia y Administración Pública. Gobierno Vasco
![Page 14: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/14.jpg)
Linked Data
Sir Tim Berners-Lee
LOD - Linked Open Data Cloud
Mecanismos básicos de la web
Aplicados a datos
HTTP -> Enlaces
URIs -> Recursos
RDF -> Estructura
http://5stardata.info/
![Page 15: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/15.jpg)
RDF + Linked Data
http://helheim.deusto.es/bizkaisense
Ontologías+Semantic Sensor Network
Semantic Web for Earth andEnvironmental Terminology
http://ckan.linkeddata.es/dataset/bizkaisense
Publicación Aplicación web
Proyecto Bizkaisense
![Page 16: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/16.jpg)
Procesado de datos
Comparar
Limpieza
ClusterizaciónCurvas de ajuste
¿Qué quieres responder?
Combinar fuentes
¿Qué quieres demostrar?
¿Qué datos tienes?
Data mining
Hadoop
![Page 17: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/17.jpg)
Visualización
Grandes volúmenes de datos
Facilitar comprensión
Interactividad
Razonar
Extraer conclusiones
Representación adecuada
![Page 18: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/18.jpg)
Gráficos de puntos (dispersión)
Distribución de valores 2D
Conocer las ocurrencias
Agrupaciones (clusters)
No representan tendencias
![Page 19: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/19.jpg)
Gráficos de líneas
Relaciones entre valores
Tendencias
Cambios temporales
No representan categorías
![Page 20: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/20.jpg)
Gráficos de barras
Compara categorías
Orden de las barras
Pareto (mayor a menor)
Cronológico
![Page 21: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/21.jpg)
Gráficos circulares
Proporción numérica
Problemas
Comparación áreas
Muchas categorías
Mejor gráficos de barras
![Page 22: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/22.jpg)
Google Charts
https://developers.google.com/chart/
Interactivos
HTML5 + SVG
Javascript
![Page 24: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/24.jpg)
D3.js
http://d3js.org/
Interactivos
HTML5
Javascript
Complementamente Excesivamente configurables
![Page 25: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/25.jpg)
Geolocalización
¡Cuidado con las licencias de uso!
![Page 26: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/26.jpg)
Visualización++
Information is Beautiful
Ideas para visualización
Figuras estáticas
Usar otras aplicaciones
http://www.informationisbeautiful.net/
![Page 27: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/27.jpg)
Proyecto LinkedStats
Mapa de calor (OpenLayers)
Kg residuos/persona
Progresión temporal
Gráficas por municipio (NVD3.JS)
Datos utilizados
ResiduosDiputación de Bizkaia(PDF Scraping)Copy & Paste - ing
PoblaciónINS(Fichero CSV)
http://helheim.deusto.es/linkedstats/
Autor
Jon Lázaro
![Page 28: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/28.jpg)
Conclusiones
Oportunidad de trabajo
Periodistas, ingenieros, diseñadores, ...
Conciencia social
Grupos interdisciplinares
![Page 29: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/29.jpg)
Algunas herramientas
OpenRefine
+
JavaScript
![Page 30: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/30.jpg)
HACKATHON
¿Cómo empezar?
Noticia en
![Page 31: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/31.jpg)
DeustoTech-Internet
Joseba Abaitua@kavango
Unai Aguilera@unaguil
Oscar Peña@Oscar_PDR
Mikel Emaldi@memaldi
Jon Lázaro@jon_lazaro
Diego López de Ipiña@dipina
David Buján@dbujan
http://www.morelab.deusto.es/ @morelab_ud
Linked and Open Data Group
![Page 32: Captura y visualización de datos abiertos para acciones ciudadanas](https://reader033.fdocuments.in/reader033/viewer/2022061223/54c43e2c4a79597c2b8b45f6/html5/thumbnails/32.jpg)
Referencias
European Public Data Show Casehttp://publicdata.eu/
http://datajournalismhandbook.orgData Journalism Handbook
Licencia Creative Commons
Now You See It: Simple Visualization Techniques for Quantitative Analysis
Python Programming Languagehttp://python.org/