Realidad aumentada para los ciegos: ¡Mira con tus oídos!
¡Mira con tus oídos! The vOICe for Android Maps Live Camera Views a Soundscapes, que ofrece realidad aumentada y detalles visuales sin precedentes para la sustitución sensorial y la visión de la computadora totalmente ciega a través de la sustitución sensorial. También incluye en vivo Talking OCR, un identificador de color parlante, brújula parlante, detector de cara parlante y un localizador GPS parlante, mientras que Microsoft que ve el reconocimiento de objetos AI y Google Lookout se puede lanzar desde The vOICe for Android tocando el borde de la pantalla izquierda o derecha.
¿Es un juego de realidad aumentada o una herramienta seria? ¡Puede ser ambos, dependiendo de lo que quieras que sea! El objetivo final es proporcionar una forma de visión sintética a los ciegos, pero los usuarios avistados simplemente pueden divertirse jugando el juego de vista sin ver. Los usuarios con discapacidad visual con visión severa de túnel pueden intentar si la retroalimentación auditiva les ayuda a notar cambios en la periferia visual. The vOICe for Android se ejecuta en teléfonos inteligentes y tabletas, pero también es compatible con la mayoría de las gafas inteligentes, utilizando la pequeña cámara en estas gafas y una interfaz de usuario especial para generar una superposición de realidad aumentada sonic en vivo, ¡con las manos libres! Es posible que desee utilizar una batería externa conectada a través del cable USB para evitar que la batería de gafas inteligentes se agote demasiado rápido. Puede ayudarnos blogueando y tuiteando sobre sus experiencias, sus casos de uso y cómo * aprende a ver con sonido.
¿Cómo funciona? La voz usa el tono para la altura y el volumen para el brillo en escaneos de un segundo de izquierda a derecha de cualquier vista: una línea brillante en ascenso suena como un tono ascendente, un punto brillante como un pitido, un rectángulo lleno de brillante como estallido de ruido, una cuadrícula vertical como ritmo. Mejor utilizado con los auriculares estéreo para la experiencia más inmersiva y la resolución auditiva más detallada.
Simplemente experimente primero con patrones visuales simples, porque las imágenes de la vida real son extremadamente complejas. Deje caer al azar un elemento brillante como un ladrillo duplo en una mesa oscura, y aprenda a alcanzarlo solo a través del sonido (cierre los ojos si tiene la vista). A continuación, intente explorar su propio entorno de hogar seguro y aprender a asociar los complejos patrones de sonido con lo que ya sabe que está ahí. Los usuarios avistados también pueden usar la aplicación con dispositivos compatibles con el cartón de Google a través de un deslizamiento en la pantalla principal para alternar la vista binocular.
Para usuarios serios: aprender a ver con sonido es como aprender un idioma extranjero o aprender a tocar un instrumento musical, realmente desafiando su perseverancia y plasticidad cerebral. Bien puede ser el último sistema de entrenamiento cerebral, uniendo los sentidos a través de la sinestesia artificial. Un manual de capacitación general para The Voice (no específico de la versión de Android) está disponible en línea en
https://www.seeingwithsound.com/manual/the_voice_training_manual.htm
y las notas de uso para ejecutar la voz para Android son manos libres en gafas inteligentes en
https://www.seeingwithsound.com/android-glasses.htm
No se preocupe por las muchas opciones de la voz para Android: los ojos humanos no tienen botones u opciones, y la voz está diseñada de manera similar para realizar su función principal fuera de la caja, por lo que no tiene que usar ninguna opción para comenzar. Algunas de las opciones más comunes aparecen a medida que desliza lentamente su dedo por la pantalla principal.
¿Por qué la voz está libre? Porque nuestro objetivo principal es hacer un cambio real al reducir las barreras para usar tanto como podamos. Encontrará que las tecnologías competidoras cuestan más de $ 10,000 y, sin embargo, tienen especificaciones más bajas. La resolución perceptiva ofrecida por la voz es inigualable incluso por $ 150,000 implantes retinianos "ojo biónico" (PLoS One 7 (3): E33136).
The vOICe for Android apoya inglés, holandés, alemán, francés, español, italiano, estoniano, húngaro, polaco, eslovaco, turco, ruso, chino, coreano y árabe (opciones de menú | Idioma).
Informe errores a [email protected] y visite la página web http://www.seeingwithsound.com/android.htm para una descripción detallada y descargo de responsabilidad. Estamos en Twitter en @seeingwithsound.
¡Gracias!
V2.73: corrección de errores para algunos botones gráficos posicionados erróneamente en la pantalla principal de la aplicación.
Descargar