Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian”...
Transcript of Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian”...
![Page 1: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/1.jpg)
Antonio Soto
SolidQ COO
@antoniosql
Mejora de los procesos industriales mediante tecnología Big Data
![Page 2: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/2.jpg)
Agenda
• La revolución de los datos
• Algunos ejemplos
• Tecnología:
• Hadoop
• Análisis
• ¿Y cómo lo integro en la Automatización de
Procesos?
![Page 3: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/3.jpg)
3© 2014 SolidQ
La Revolución de los datos
Business Analytics Internet Of Things
Machine Learning
Stream Analytics Power BI
Hadoop NoSQL Intelligent Systems
Data Mining Big Data Hive
Pig Scorecards
![Page 4: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/4.jpg)
4© 2014 SolidQ
La revolución de los datos
• “Esto es solo para los de marketing”
• “Nosotros no tenemos tantos datos”
• “En el mundo de la industria no manejamos
datos”
• …….
![Page 5: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/5.jpg)
El primer Proyecto de Big Data…Año 2009
5© 2014 SolidQ
![Page 7: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/7.jpg)
ALGUNOS EJEMPLOS
7 |
![Page 8: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/8.jpg)
8© 2014 SolidQ
Algunos ejemplos
![Page 9: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/9.jpg)
9© 2014 SolidQ
Algunos ejemplos
![Page 10: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/10.jpg)
10© 2014 SolidQ
Algunos Ejemplos
![Page 11: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/11.jpg)
TECNOLOGÍA
11 |
![Page 12: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/12.jpg)
¿Qué es Hadoop?
• Open Source
• Plataforma de almacenamiento de datos y
análisis para Big Data
• Optimizado para manejar
• Datos masivos a través de paralelismo
• Variedad de datos (Estructurados, No-estructurados,
Menos estructurados)
• Uso de hardware económico
• No para OLTP / OLAP
© 2014 SolidQ
![Page 13: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/13.jpg)
Escalable
Escala linealmente en capacidad de almacenamiento y computación
Tolerante a Fallos
Proporcionado por el Sistema de ficheros distribuido y el framework de lectura
Procesamiento distribuido
Sigue la estrategia de divide y vencerás
¿Qué es Hadoop?: Ventajas
![Page 14: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/14.jpg)
14© 2014 SolidQ
HBase (column DB)
Hive Mahout
Oozie
Sqoop
HBase/Cassandra/Couch/
MongoDB
Avro
Zoo
ke
ep
er
Pig FlumeCascadingR
Am
bari
HCatalog
Hadoop = MapReduce + HDFS
![Page 15: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/15.jpg)
HDFS
Map-Reduce Ambari
YARN
El ecosistema Hadoop
Storm
TEZ
Stinger
![Page 16: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/16.jpg)
Análisis
• Machine Learning
• Proporcionar acceso en tiempo real a
algoritmos de Machine Learning
• Integración con R
• Stream Analytics
• Realizar análisis en tiempo real de datos en
stream
![Page 17: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/17.jpg)
¿ Y CÓMO LO INTEGRO CON
LA AUTOMATIZACIÓN DE
PROCESOS?17 |
![Page 18: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/18.jpg)
18© 2014 SolidQ
Hasta ahora
• “Plant Historian”
![Page 19: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/19.jpg)
19© 2014 SolidQ
Entonces que es lo nuevo?
• El “plant historian” sería otra fuente de datos más
para el Big Data
• Junto con, por ejemplo, datos clima, otras áreas de la
empresa, controladores, dispositivos, etc…
• Algunos ejemplos:
• GE Proficy Monitoring & Analysis Software Suite
• Seeq
![Page 20: Mejora de los procesos industriales mediante tecnología Big Data · •El “plant historian” sería otra fuente de datos más para el Big Data • Junto con, por ejemplo, datos](https://reader034.fdocuments.co/reader034/viewer/2022042205/5ea7497ae9467e3e1c22d224/html5/thumbnails/20.jpg)
PREGUNTAS