Jornada: Computer Vision en la Industria 4.0

Presente y Futuro de la Realidad Aumentada y Realidad Virtual en la industria.

Indice• Presentación• Realidad Aumentada

• Qué es• Qué no es• Por qué la RA• Cómo funciona• Técnicas de RA• Para qué• Dispositivos• Ejemplos

• Realidad Virtual• Qué es• Dispositivos• Ejemplos

• Conclusion

Realidad Aumentada

Peliculas3 ▌

Realidad AumentadaSegún la Wikipedia: La realidad aumentada (RA) es el término que se usa para definir una visión a través de un dispositivo tecnológico, directa o indirecta, de un entorno físico del mundo real, cuyos elementos se combinan con elementos virtuales para la creación de una realidad mixta en tiempo real. Consiste en un conjunto de dispositivos que añaden información virtual a la información física ya existente, es decir, añadir una parte sintética virtual a lo real. Esta es la principal diferencia con la realidad virtual, puesto que no sustituye la realidad física, sino que sobreimprime los datos informáticos al mundo real…

Realidad Aumentada

Añadir información virtual al mundo real.

No es cosa del futuro

Realidad Aumentada

Es algo del presente

Realidad Aumentada

Realidad Aumentada‐ Natural User Interfaces: Natural, intuitivo, fácil ‐ Efecto WOW ‐ Capas de información: Texto, video, audio, 3D, animaciones, interacción ‐ Descubrimiento‐ Juego

¿Por qué utilizarla?

Realidad Aumentada

¿Cómo funciona?

–Localización(Sist. De Coordenadas)

+ Visualización(Integración Real – Virtual)

Realidad Aumentada‐ Tipos de Trackeo/Localización

‐ Patrones pre‐entrenados‐ 1: Patrones 2D Simples: Bidimensionales B&W‐ 2: Patrones 2D Naturales: Imagen‐ 3: Patrones 3D

‐ No pre‐entrenado: SLAM‐ Otros

‐ Geolocalización: GPS, Brújula‐ Cara, manos, cuerpo

Realidad Aumentada: Patrones 2D B&N

Realidad Aumentada

Patrones 2D Naturales

Manual Aumentado

Patrones3D

Realidad Aumentada: Marcadores 3D

Nivel 3:

Patrones 3DManual Aumentado

Realidad Aumentada: Marcadores 3D

Localización de elementos utilizando el GPS, Brújula, Giróscopos, etc…

Realidad Aumentada: Geolocalización

Aumentando objetos a

Gran escala

Realidad Aumentada: Geolocalización

Realidad Aumentada

¿En qué utilizarla?

‐ Para:‐ Juegos‐ Educacion/Niños‐ Medicina‐ Espacio‐ Bomberos‐ Defensa‐ Patrimonio‐ TV‐ Deportes‐ Publicidad‐ Industria‐ Aviacion‐ Guiado‐ Etc…

• Química

Industries using augmented reality and virtual reality• Education• Healthcare• Air and space• Marketing• Journalism• Travel• Real estate

• Skilled trades in Factories• Training• Manual

• Automotive• Retail

Realidad Aumentada: Industria

Cada vez más empresas

Realidad Aumentada

Mobile Augmented Reality Market Worth 79.77 Billion USD by 2022May 04, 2016 MarketsandMarkets

Augmented Reality Market Worth $100.24 Billion By 2024May 02, 2016 Grand View Research, Inc.

Realidad Aumentada&Virtual

20 ▌

• Realidad Aumentada: Asistencia virtual como si estuviera el experto a su lado.

• Teleasistencia mediante Telepresencia: Sistema de ayuda/asistencia al operario mediante telepresencia. RA sobre máquina. Conexión con la máquina. Obtención de datos e interacción con máquina. Gestión de documentación. Gestión de alertas. Gestión de revisiones.

• Manual Aumentado/Training: Sistema automático que asiste y/o entrena al operario dando instrucciones paso a paso. Identificacionautomática de máquina. RA sobre máquina. Acciones complejas. Sin necesidad de Experto.

• Control Aumentado: Sistema de control, gestión, mantenimiento, acción sobre máquina mediante RA. Obtención de datos. Interactuación con máquina a través de RA..

• Realidad Virtual Inmersiva: Recreación inmersiva de entornos complejos.• Simuladores: Planta Termosolar, Grúa, helicóptero, avión, UAV,

Carretilla, procesos, etc.• Training: Entrenamiento de situaciones peligrosas, costosas, etc.

• Dispositivos• Experiencia con los dispositivos más punteros de Realidad Virtual y

Aumentada


Ventana a la

Información

Proyecto Demo DEMA – 054932.3Financiación 3.000€ ‐ PI desarrollo propioTareas a Realizar Visualización Datos tiempo real Sistema SCADA de DEMAOtros aspectos PI DEMA

Bidelek: Información AR + conexión Scada

Control Aumentado


Bidelek: Información AR + conexión Scada

Control Aumentado



Asistencia

Natural

Asistencia al usuario para montar un filtro Diesel



SIVIRA: Sistema de visión artificial y realidad Aumentada para aumento de la productividad

Proyecto ENVASES – 052553Financiación 16.000€ ‐ PBCTareas a Realizar APP Móvil Manual RA para la empresa EnvasesOtros aspectos PI IyT – Jone Echezarra

Manual Aumentado para acciones complejas


Transcripción y traducción en

Tiempo real


Planos CAD Interactivos


Proyecto 053127

Tareas a Realizar Plataforma para la formación remota mediante el uso de tecnologías móviles y realidad aumentada. Dentro de esta plataforma, se identifica como objetivo contar con un cliente de acceso a la plataforma a través de dispositivos móviles como tablets o smartphones, y la posibilidad de utilizar smartglasses para la visualización de contenidos mediante realidad aumentada y el intercambio de la señal de video entre el operario y el experto formador para formar a los trabajadores en las tareas que deben realizar.

Otros aspectos

Proyecto 049077

Tareas a Realizar E.1.2 Escenarios de uso del sistema.E.1.4. Diseño Técnico de la plataforma

Plataforma de asistencia al mantenimiento (PAM4.0) que permita la comunicación remota entre un operario y un experto para que le asista durante operaciones de mantenimiento mediante la combinación de un sistema de telepresencia y tecnologías de realidad aumentada.

Otros aspectos


Proyecto 054167

Tareas a Realizar T2.1.2 Realidad aumentada para visualización de datos e interacción en proceso productivo (TC‐ICT)Se creará un demostrador de sistema de realidad aumentada móvil de visualización de datos procesos en planta de producción. Tambiénpermitirá interactuar a través de las interfaces de RA con las máquinas que forma ese proceso productivo. Es decir no sólo ver por ejemplodatos de un sensor sino mostrar al operario una interfaz intuitiva para que influya y cambie el comportamiento de la máquina en tiemporeal. Este demostrador se desarrollará dispositivos móviles tradicionales (móviles/tablets) y sobre dispositivos wearables (smart‐glasses)

T2.2 Sistema de Tele‐asistencia mediante tele‐presencia (TC‐ICT)En esta tarea se desarrollará una herramienta software para tele‐asistir a un operario en planta ya sea en labores de mantenimiento,arreglo o incluso formación. En este caso no es sólo el operario el que interactúa sino también un experto que le asiste ya que recibe envideo lo mismo que está viendo el operario y puede marcarle los pasos para que el operario vaya viendo visualmente los pasos a seguir. Elexperto puede estar en planta o en cualquier otro lugar. Para ello se utilizará tecnología de realidad aumentada y de video‐streaming sobredispositivos móviles tradicionales (móviles/tablets) y sobre dispositivos wearables (smart‐glasses)


Realidad Aumentada‐ Dispositivo

‐ Iluminación‐ Móvil / Tablet‐ Gafas‐ Cascos‐ ¿Futuro?

Catedral

Santa María

Realidad Aumentada

Realidad Aumentada

Iluminación en la automoción

Realidad Aumentada

Móvil, Tablet, Android, iOs…

Realidad Aumentada: Gafas

Tipo: Google GlassTipo: Vuzix M100


Tipo: Completamente sintético

Optical See Through


Magic Leap


Facebook Glass?


Nuevos dispositivos con avanzadas caracteristicas

Realidad Aumentada: SmartGlasses


Casco Daqri

Microsoft Hololens


Bomberos

- Camara Térmica- Temp. ambiente- Maxima Temp.

- Manos libres- Mayor eficiencia- Ayuda a manejar

situaciones

Realidad Aumentada

Lentillas

Realidad Aumentada: Futuro

Realidad Aumentada: Interfaces

Realidad Virtual InmersivaPosible definición:Son aquellas tecnologías que tienden a proveer de unainformación sensorial lo suficientemente fiel como paraque el cerebro no pueda distinguirlo de la realidad.

Simulators

Realidad Virtual Inmersiva

Inmersión - Training industrial

PlantaSolar

Infrastructura

Experiencias

Formula 1en Monaco

Realidad Virtual InmersivaOculus Rift HTC Vive

Display OLED OLED

Resolution 2160 x 1200 2160 x 1200

Refresh Rate 90Hz 90Hz

Platform Oculus Home SteamVR

Field of view 110 degrees 110 degrees

Tracking area 5 x 11 feet 15 x 15 feet

Built-in audio Yes Yes

Built-in mic Yes Yes

Controller Oculus Touch, Xbox One controller SteamVR controller, any PC compatible gamepad

Sensors Accelerometer, gyroscope, magnetometer, 360-degree positional tracking

Accelerometer, gyroscope, laser position sensor, front-facing camera

Connections HDMI, USB 2.0, USB 3.0 HDMI, USB 2.0, USB 3.0

Requirements

NVIDIA GTX 970 / AMD 290 equivalent or greaterIntel i5-4590 equivalent or greater8GB+ RAMCompatible HDMI 1.3 video output2x USB 3.0 portsWindows 7 SP1 or newer

NVIDIA GeForce GTX 970 /Radeon R9 280 equivalent or greaterIntel Core i5-4590 equivalent or greater4GB+ of RAMCompatible HDMI 1.3 video output1x USB 2.0 port

Price $600 $800

DT review Hands-on Review


Google Cardboard

Samsung Gear


Samsung Gear


Google Cardboard


Google Daydream

Realidad Virtual

Project

Tango

LEAP Motion

Realidad Virtual Inmersiva - Interacción

Realidad Aumentada y Realidad Virtual Inmersiva

Conclusión:– Son herramientas que están ya siendo usadas

ampliamente en la industria– Ahorran dinero y tiempo– Las grandes empresas están apostando por esto– Hardware y el software relacionados están mejorando

increíblemente día a día– Este es el momento para coger la ola

“La Realidad es meramente una ilusión, aunque una muy persistente.”― Albert Einstein

“Nothing is real.”― John Lennon

Sobre la Realidad…

Visita nuestro blog:http://blogs.tecnalia.com/inspiring-blog/

www.tecnalia.com

Muchas Gracias!!

[email protected]

Modelado Procedural

RecreandoCiudades Reales


REVOCROM: Ayuda al proceso de

ensamblaje

Jornada: Computer Vision en la Industria 4.0

Technology

Transcript of Jornada: Computer Vision en la Industria 4.0