Post on 16-Feb-2015
2
CASBLIP – IMÁGENES 3D EN SONIDOS PARA PERSONAS CIEGAS O CON DISCAPACIDAD VISUAL
3
El Centro de Investigación en Tecnologías Graficas de la Universidad Politécnica de Valencia, ha coordinado el proyecto europeo CASBliP, (Cognitive Aid System for Blind People), un proyecto europeo orientado al desarrollo de ayudas cognitivas para personas invidentes, desarrollado durante los últimos tres años con un presupuesto de 2 Mill €. IST-2004-2.4.8 - Cognitive Systems
El proyecto une expertos de toda Europa y tiene más de 10 Años de Trabajo.
PROYECTO CASBLIP (2006-2009)
4
PROYECTO CASBLIPCASBLiP nació con el objetivo de diseñar una herramienta tecnológica que permita a las personas invidentes la integración en la vida social mejorando su calidad de vida y aportándoles herramientas adicionales a las que ya poseen - bastón, perros, etc.- para mejor su movilidad. El 1,9% de la población europea tiene discapacidad visual, total o parcial. En el mundo hay aproximadamente 314 millones de personas con discapacidad visual, 45 millones de las cuales son ciegas.
Partiendo de Tecnologías existentes en CASBLIP fue una propuesta de la UPV para integrarlas y crear una herramienta a disposición de personas ciegas, existiendo experiencias para personas con otro tipo de discapacidades visuales.
5
PROYECTO CASBLIPEl proyecto, liderado por la UPV, ha sido desarrollado gracias a fondos de la Unión Europea, con la participación de otros 6 socios europeos:
- CITG-UPV- Universidad de La Laguna (España) - Universidad Politécnica de Le Marche (Italia)- Instituto Francesco Cavazza (Italia)- Universidad de Bristol (Inglaterra)- SIEMENS (Alemania)- DBSV (Alemania).
4 UNIVERSIDADES
1 EMPRESA
TECNOLÓGICA2 ASOCIACIONES-
USUARIOS FINALES
6
PROYECTO CASBLIP
NeuralNetwork
FeatureExtraction
ImageSegmentation
7
PROYECTO CASBLIP
Visualcortex
8
PROYECTO CASBLIP
Prototipo M1 esta formado por dos procesos; la captura de información procedente del mundo real y la transformación de dicha información en sonidos interpretables por los usuarios finales, personas invidentes.El sistema final está compuesto por unas gafas, las cuales incluyen toda la electrónica láser necesaria para la captura de la información de las distancias, el ensamblado de los circuitos que componen la FPGA encargada de sonificar la información procedente del láser y unos auriculares, además de la batería para alimentar la circuitería.
Sensor 3DSonification
SW
M1
9
PROYECTO CASBLIP
Prototipo preliminar de M1
Image of the first M1 Prototype compound by Laser with an Audio System Converter.
10
PROYECTO CASBLIPPrototipo M1
11
PROYECTO CASBLIPPrototipo M1
Blind person with3D recognition system
Time-of-flight CMOS line sensorwith laser illumination
Blind person with3D recognition system
Time-of-flight CMOS line sensorwith laser illumination
12
PROYECTO CASBLIP
Prototipo M2 la información es capturada mediante cámaras de estereovisión y con formato 3D. El sistema segmenta la imagen en diferentes áreas de interés, basándose concretamente en la detección de un objeto (en movimiento con prioridad sobre los estáticos, o el más cercano en caso de varios objetos estáticos) y de pasillos o áreas libre de paso, por las cuales el invidente puede circular sin peligro alguno. El sistema funciona en tiempo real (10 fr / seg) por lo que se puede utilizar mientras se camina por la calle a ritmo normal.
SW Module Cameras
SW Integration
SW Sonification
SW Module Cameras
13
PROYECTO CASBLIP
Prototipo definitivo resultado de toda la investigación llevada a cabo durante estos últimos 3 años (2005 – 2008), se ha llegado a integrar y fabricar un prototipo formado por la unión de los dos prototipos, M1, M2 y GPS
SOUND MIXER
14
PROYECTO CASBLIPEl prototipo definitivo que actualmente existe operativo, y que esperamos sea mejorado y optimizado en futuros proyectos, dispone de las siguientes características:
•De 0 a 5 metros, el sistema es capaz de capturar información real sobre objetos estáticos y transformarla a mapas acústicos.
•De 5 a 15 metros, el sistema puede interpretar información de pasillos libres y objetos en movimiento.
•Toda esta información es sonificada y enviada a los auriculares que finalmente utiliza el usuario.
•Para instalar y ejecutar todo el proceso sólo es necesario un PC portátil y una PDA.
15
PROYECTO CASBLIP
SOUND MIXER
16
PROYECTO CASBLIP
17
ACTUALIDAD Y FUTURO
PROYECTO CASBLIP
Estamos en la segunda versión de un prototipo precomercial aplicable a personas total y parcialmente ciegas. Físicamente el sistema se constituye por un PC unas Gafas con 2 Monitores y unos auriculares.Existe acuerdos para su Validación con el FOM con DBSV y con Berkeley. No existe, a fecha de hoy una empresa que lo comercialice, tan sólo expresiones de interés de manera que la comercialización no está garantizada en un plazo breve.