Depth estimation for visually impaired people using mobile devices

Abstract

This paper presents the development of an application to estimate depth using mobile devices that could help visually impaired people to navigate in everyday sites. The mobile device incorporates a stereo camera system and the application takes advantage of the operating system capabilities, such as parallel computation, hardware configuration, in conjunction with the image processing libraries to implement well known and fast performing algorithms for depth estimation. Each camera is calibrated separately and afterwards a stereo calibration is performed. Depth estimation is calculated using two different algorithms and an evaluation of their performance is presented. The mobile devices handle the computational load fast enough to be able to produce the results within the walk time at normal pace. Depth estimation error is low enough to allow object detection like obstacles, room walls or moving persons.

Este trabajo presenta el desarrollo de una aplicación para estimar la profundidad utilizando dispositivos móviles que podría ayudar a las personas con discapacidad visual a navegar en sitios cotidianos. El dispositivo móvil incorpora un sistema de cámaras estéreo y la aplicación aprovecha las capacidades del sistema operativo, como el cálculo paralelo, la configuración del hardware, junto con las librerías de procesamiento de imágenes para implementar algoritmos bien conocidos y de rápido rendimiento para la estimación de la profundidad. Cada cámara se calibra por separado y después se realiza una calibración estereoscópica. La estimación de la profundidad se calcula utilizando dos algoritmos diferentes y se presenta una evaluación de su rendimiento. Los dispositivos móviles manejan la carga computacional lo suficientemente rápido como para poder producir los resultados dentro del tiempo de paseo a ritmo normal. El error de estimación de la profundidad es lo suficientemente bajo como para permitir la detección de objetos como obstáculos, paredes de la habitación o personas en movimiento.