2

CASBLIP – IMÁGENES 3D EN SONIDOS PARA PERSONAS CIEGAS O CON DISCAPACIDAD VISUAL

3

El Centro de Investigación en Tecnologías Graficas de la Universidad Politécnica de Valencia, ha coordinado el proyecto europeo CASBliP, (Cognitive Aid System for Blind People), un proyecto europeo orientado al desarrollo de ayudas cognitivas para personas invidentes, desarrollado durante los últimos tres años con un presupuesto de 2 Mill €. IST-2004-2.4.8 - Cognitive Systems

El proyecto une expertos de toda Europa y tiene más de 10 Años de Trabajo.

PROYECTO CASBLIP (2006-2009)

4

PROYECTO CASBLIPCASBLiP nació con el objetivo de diseñar una herramienta tecnológica que permita a las personas invidentes la integración en la vida social mejorando su calidad de vida y aportándoles herramientas adicionales a las que ya poseen - bastón, perros, etc.- para mejor su movilidad. El 1,9% de la población europea tiene discapacidad visual, total o parcial. En el mundo hay aproximadamente 314 millones de personas con discapacidad visual, 45 millones de las cuales son ciegas.

Partiendo de Tecnologías existentes en CASBLIP fue una propuesta de la UPV para integrarlas y crear una herramienta a disposición de personas ciegas, existiendo experiencias para personas con otro tipo de discapacidades visuales.

5

PROYECTO CASBLIPEl proyecto, liderado por la UPV, ha sido desarrollado gracias a fondos de la Unión Europea, con la participación de otros 6 socios europeos:

- CITG-UPV- Universidad de La Laguna (España) - Universidad Politécnica de Le Marche (Italia)- Instituto Francesco Cavazza (Italia)- Universidad de Bristol (Inglaterra)- SIEMENS (Alemania)- DBSV (Alemania).

4 UNIVERSIDADES

1 EMPRESA

TECNOLÓGICA2 ASOCIACIONES-

USUARIOS FINALES

6

PROYECTO CASBLIP

NeuralNetwork

FeatureExtraction

ImageSegmentation

7

PROYECTO CASBLIP

Visualcortex

8

PROYECTO CASBLIP

Prototipo M1 esta formado por dos procesos; la captura de información procedente del mundo real y la transformación de dicha información en sonidos interpretables por los usuarios finales, personas invidentes.El sistema final está compuesto por unas gafas, las cuales incluyen toda la electrónica láser necesaria para la captura de la información de las distancias, el ensamblado de los circuitos que componen la FPGA encargada de sonificar la información procedente del láser y unos auriculares, además de la batería para alimentar la circuitería.

Sensor 3DSonification

SW

M1

9

PROYECTO CASBLIP

Prototipo preliminar de M1

Image of the first M1 Prototype compound by Laser with an Audio System Converter.

10

PROYECTO CASBLIPPrototipo M1

11

PROYECTO CASBLIPPrototipo M1

Blind person with3D recognition system

Time-of-flight CMOS line sensorwith laser illumination

Blind person with3D recognition system

Time-of-flight CMOS line sensorwith laser illumination

12

PROYECTO CASBLIP

Prototipo M2 la información es capturada mediante cámaras de estereovisión y con formato 3D. El sistema segmenta la imagen en diferentes áreas de interés, basándose concretamente en la detección de un objeto (en movimiento con prioridad sobre los estáticos, o el más cercano en caso de varios objetos estáticos) y de pasillos o áreas libre de paso, por las cuales el invidente puede circular sin peligro alguno. El sistema funciona en tiempo real (10 fr / seg) por lo que se puede utilizar mientras se camina por la calle a ritmo normal.

SW Module Cameras

SW Integration

SW Sonification

SW Module Cameras

13

PROYECTO CASBLIP

Prototipo definitivo resultado de toda la investigación llevada a cabo durante estos últimos 3 años (2005 – 2008), se ha llegado a integrar y fabricar un prototipo formado por la unión de los dos prototipos, M1, M2 y GPS

SOUND MIXER

14

PROYECTO CASBLIPEl prototipo definitivo que actualmente existe operativo, y que esperamos sea mejorado y optimizado en futuros proyectos, dispone de las siguientes características:

•De 0 a 5 metros, el sistema es capaz de capturar información real sobre objetos estáticos y transformarla a mapas acústicos.

•De 5 a 15 metros, el sistema puede interpretar información de pasillos libres y objetos en movimiento.

•Toda esta información es sonificada y enviada a los auriculares que finalmente utiliza el usuario.

•Para instalar y ejecutar todo el proceso sólo es necesario un PC portátil y una PDA.

15

PROYECTO CASBLIP

SOUND MIXER

16

PROYECTO CASBLIP

17

ACTUALIDAD Y FUTURO

PROYECTO CASBLIP

Estamos en la segunda versión de un prototipo precomercial aplicable a personas total y parcialmente ciegas. Físicamente el sistema se constituye por un PC unas Gafas con 2 Monitores y unos auriculares.Existe acuerdos para su Validación con el FOM con DBSV y con Berkeley. No existe, a fecha de hoy una empresa que lo comercialice, tan sólo expresiones de interés de manera que la comercialización no está garantizada en un plazo breve.

20

www.casblip.es

www.citg.es