Presentación: 'Computer vision y realidad aumentada' de Jorge Posada. Director Adjunto y Director Cientifico Tecnológico. VICOMTECH en el II Encuentro de Inteligencia Artificial de AMETIC #AIlikeIT2

1. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
Computer Vision y Realidad Aumentada
Ejemplos de aplicación de Inteligencia Artificial en Industria
Dr.-Ing. Jorge Posada
Director Científico-Tecnológico
Vicomtech

2. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
2
Profesionales
Professionals
148
Doctores
Ph.D.
58
Equipo Internacionales
International Team
15%
H2020 & Internacional
H2020 & International
23%
Investigación Aplicada y
Transferencia de Tecnología
Salud Transporte Movilidad Industria Media Security
Cuota Industrial
Industrial Quota
46%
Energía

3. 3
Vicomtech (current President)
DFKI - German Research Center
for Artificial Intelligence
Fraunhoher Heinrich Hertz Institute
Hasso-Plattner Institute
CEA-List
Centro de Computaçao Grafica
Chinese-German Center
Artificial Intelligence CGAII

4. Research Achievements April 2019: H2020 -6 highlighted projects in Artificial Intelligence
Vicomtech: Project Leader
http://ec.europa.eu/newsroom/dae/document.cfm?doc_id=51610

5. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
5

6. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
6

7. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
7
Caso 1
Realidad Aumentada potenciada
por Inteligencia Artificial

8. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
Contexto – Problemática Industrial
8
▪ Montaje manual de múltiples componentes
▪ Operarios con discapacidad
▪ Pueden producirse errores de montaje
▪ Inseguridad
• ¿Potenciar al Operario 4.0 con IA & AR?
▪ IKOR: Servicios integrales de diseño y fabricación
de circuitos electrónicos (EMS).
▪ Plantas en España, México y China
▪ Cerca de 1000 empleados y 1 millón de
componentes/hora
▪ Proyección global en los 5 continentes

9. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
9
Retos
▪ Más de 10.000 referencias
▪ Actualización continua de referencias
▪ Variaciones de apariencia y orientación
Control de proceso

10. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
▪ Estación de trabajo con Realidad Aumentada proyectada
▪ Clasificación supervisada de componentes
▪ Entrenamiento de componentes (variación de perspectiva)
Segmentación
automática
10
Solución propuesta

11. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
▪ Data Augmentation
11
Solución propuesta
Transformaciones
geométricas
Transformaciones
fotométricas
+
.
.
.
…..
> 4000 muestras por componente

12. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
12
.
.
.
Solución propuesta

13. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
13
Solución propuesta
+
Fondos generados artificialmente
▪ Data Augmentation
… > 4000 imágenes por componente
Generación de modelo
(clasificador entrenado)
Entrenamiento

14. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
14
Componente
detectado
Siguiente
componente
Componente NO
detectado
Solución propuesta

15. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
15
Solución propuesta

16. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
Situación actual
• Pruebas reales actuales con operarios en planta
• Tiempos de entrenamiento mínimos (<1 minuto)
• Los operarios manifiestan mayor seguridad y satisfacción
• En segunda fase de validación
– Medición de mejora en tiempos de montaje
– Medición disminución de errores
– Estadísticas de uso en condiciones reales y continuas
16

17. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
17
Caso 2
Inteligencia Artificial para generación
de patrones de normalidad
en procesos industriales disruptivos

18. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
18
▪ Cantidad ingente de datos de doble
naturaleza:
▪ Datos de máquina
▪ Imágenes de proceso
▪ Necesidad de generar modelos de
normalidad, IA como tecnología clave.
▪ CPS que puedan auto-predecir
▪ Grupo Etxe-tar es un referente internacional de
primer nivel en automoción. Líder mundial en
sistemas flexibles de mecanizado de cigueñales.
▪ Más de 50 años de experiencia
▪ Excelente prestigio internacional. Premios al mejor
proveedor de FORD, GM, CHRYSLER, VW, etc.
▪ TALENS: Templado por laser de cigüeñales,
pioneros a nivel mundial.
▪ 3er Premio la mejor tecnología laser en
Alemania: Innovation Laser Award 2018
▪ Única vez que lo ha ganado un "no-alemán"

19. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
19
Control de calidad en proceso

20. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
Monitorización con cámara NIT
▪ Sensibililidad espectral infrarrojo
medio (MWIR)
▪ Adquisición de muy alta
frecuencia (1000 fps)
▪ 32x32 pixels por cada imagen
(1024 dimensions)
20
Temperaturas
- Datos de posición del láser:
100 MBytes por cigueñal
Frecuencia de muestreo: 100 KHz
Se samplean 2 señales, X e Y
Se pueden generar hasta 48 GB diarios (en producción continua)
-Datos de vídeo de termografía del láser
265MBytes por cigüeñal
Frecuencia de muestreo: 1 KHz (1000 imágenes por segundo)
Se pueden generar casi 130 GB diarios (en producción continua)
Contexto – Problemática Industrial

21. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
¿Donde se aplica la IA?
▪ Se utiliza para comprender el efectos de las variables en el proceso.
▪ Modelización del estado de normalidad.
▪ Falta de evidencia de proceso anormal.
21
Situación actual
Dynamic Bayesian Networks (DBN)
▪ Descripción de la relación temporal entre las variables
monitorizadas (procesos dinámicos)
▪ Score para cada nuevo estado (según la normalidad)
▪ Más de 15.000 cigüeñales templados
Curado / Almacenamiento / Filtrado / Clasificación / Clusterización
▪ Orden de Gigabytes/día

22. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/201922
• La Inteligencia Artificial es un claro habilitador para la solución de
problemas industriales reales.
• Computer Vision es en esencia una de las formas más importantes de
aplicar Inteligencia Artificial en Industria
• No se trata de “cajas negras”, son muy importantes las personas y los
modelos.
Conclusiones

23. II Encuentro de Inteligencia Artificial #AIlikeIT2 – 30/05/2019
Paseo Mikeletegi 57,63,71
Donostia-San Sebastian
+34 943 30923
23
Main Building
Eskerrik asko!
Muchas Gracias!
Thank you!