Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

14

Transcript of Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

Page 1: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)
Page 2: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

2

.

CONEIXEME

NT

HUB DE CONEIXEMENT

● Hub de tots els agents d'Open Data per generar sinergies.

○ Objectiu comú: que Barcelona esdevingui un node referent al món en "Open Data"

○ Compartir visió, objectius respecte promoció Open Data a Barcelona

○ Accelerar processos d'adopció de l'open data en el sector privat i públic

○ Impulsar nous projectes col·laboratius entre organitzacions participis en Iniciativa BCN OData

○ Coordinar accions per aconseguir més eficàcia en avanç d'Open

Projecte Co-creat amb la participació de persones i organitzacions diverses.

Instruments: Consell Assessor & Comunitat de coneixement & Comunitat-xarxa

Page 3: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

2016 2017

EIXXARXA

EIXDIVULGACIÓ

EIXFORMACIÓ

EIXINVESTIGACIÓ

EIXEMPRENDEDORIA

Page 4: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

ESCOLA CIUTADANA DE DADES

Empoderar a la ciutadanía en l’ús de les dades obertes

Oferir eines de formació pel desenvolupament personal en dades obertes.

Promoure el coneixement

Page 5: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)
Page 6: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

Limpieza de Datos

Enrique Rodríguez |

[email protected]

con Herramientas Open Source

Page 7: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

DataNauta. Escuchando Datos Enrique Rodríguez | [email protected] | +34 627489199

DataNauta :: BIO

Licenciado en Investigación y Técnicas de

Mercados (UB), diplomado en Estadística (UB),

posgraduado en Datamining (UOC),

posgraduado en Business Intelligence (UPC) y

posgraduado en Investigación de Mercados

(Colegio de Sociólogos y Politólogos de

Cataluña). Postgraduado en Antropología (UB).

Con 17 anos de experiencia en Analisis de

Datos, Inteligencia de Negocio e Investigacion

de Mercados. Actualmente trabajo como

Consultor / Formador freelance de Inteligencia

de Mercados y soy profesor de Analisis de

Datos e Inteligencia de Negocio en diversas

organizaciones.

Page 8: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

DataNauta. Escuchando Datos Enrique Rodríguez | [email protected] | +34 627489199

Fuentes de

información

Secundarias

Primarias

Cuantitativas

Cualitativas

Externas

Internas

• Reuniones de Grupo

• Entrevistas en Profundidad

• Técnicas proyectivas

• Observación

• Sistema de información Interno

• Encuestas

• Observación

• Experimentos

• Sistema de Información Interno

• Enriquecimiento Cualitativo

• Estadísticas públicas

• Publicaciones sectoriales

• Informes comerciales

• Redes Sociales

- Rapidez+ Precisión

+ Coste

+ Rapidez

- Precisión

- Coste

RepositorioFuentes de información

Page 9: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

DataNauta. Escuchando Datos Enrique Rodríguez | [email protected] | +34 627489199

Actividad Sector

Tendencias

Paneles

Búsquedas

Internet

Encuestas

Información interna

Redes

Sociales

Información

Socio-

demográfica y

económica

Opinión

Intereses

Información

sectorial

Situación del entorno

Valor

Hábitos de consumo

Entrevistas en

profundidad

Dinámicas

de grupo

ObservaciónEtnografía

Ecosistema de Datos

Page 10: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

DataNauta. Escuchando Datos Enrique Rodríguez | [email protected] | +34 627489199

Definición

- Definición de objetivos- Definición de indicadores- Diseño del experimento- Definición del plan de

trabajo

Repositorio

- Integración de las fuentes- Validación de la

información- Normalización y

deduplicación de los registros

- Comprender la situación actual

- Estimar indicadores- Identificar patrones- Predecir resultados

Proceso de análisis

Análisis

- Presentar la información- Extraer conclusiones

Presentación

Créditos Iconos : http://graphicdesignjunction.com/2013/05/best-mini-icons-for-ui-design/

Sistema de Información Extracción de conclusiones

Page 11: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

Inteligencia de Negocio

Redes Sociales

Minería de Datos

Fuentes de Información

Captura / Almacenaje

/ Integración

Herramientas

Análisis

Repositorio

D3.js

Función Herramienta

Page 12: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

¿Podemos representar los

establecimientos de turismo rural de

Catalunya en un mapa?

Page 13: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

Proceso de Limpieza y Preparación datos

- Descarga XML

WWW Open Refine

- Selección capa XML- Análisis calidad datos- Selección direcciones- Exportación XLSX

MS Excel

- Normalización nombres- Deduplicación- Creación dirección- Proceso fechas- Cálculo antigüedad- Extracción espigas

- Geocode API Google Maps- GET Request API- JSON a Tabla - Asignación de coordenadas- Preparación output- OpenStreetMap View

KNIME

Page 14: Workshop "Neteja de Dades" amb Enrique Rodríguez (Datanauta)

DataNauta. Escuchando Datos Enrique Rodríguez | [email protected] | +34 627489199

Enrique Rodríguez / DataNauta

[email protected]

+34 627 48 91 99

http://escuchandodatos.wordpress.com

http://twitter.com/datanauta

http://es.linkedin.com/in/erodriguezgar