Investigadores de la Universidad de Singapur muestran el último prototipo de auricular AiSee que permite a los ciegos ver el mundo mediante descripciones de voz con IA
Los investigadores del Laboratorio de Humanidades Aumentadas de la Universidad Nacional de Singapur han demostrado el último prototipo de auricular AiSee para invidentes. Originalmente un proyecto de la Universidad de Auckland en 2018, el auricular impulsado por IA utiliza una cámara para identificar objetos y luego proporciona una descripción de voz para los usuarios que tienen problemas de visión.
Los ciegos y las personas con baja visión tienen a menudo el problema de averiguar qué tienen delante. Distinguir entre latas de sopa se convierte en todo un reto dado el tacto idéntico de etiquetas y latas. Las búsquedas de imágenes con teléfonos inteligentes pueden ayudar, pero este método requiere un teléfono inteligente, conexión de datos y una mano libre.
El AiSee funciona con un simple toque de un botón del oído izquierdo. Una cámara de 13 megapíxeles capta imágenes de objetos para su identificación por el sistema impulsado por IA, que a continuación pronuncia las descripciones de los objetos al usuario a través de altavoces de conducción ósea que pueden oírse incluso en espacios exteriores ruidosos. Estos altavoces tampoco bloquean los sonidos ambientales importantes. Una batería recargable de 1200 mA alimenta los auriculares.
El AiSee sigue en desarrollo para mejorar aún más el dispositivo. Mientras tanto, los lectores que envejecen con presbicia pueden probar un buen par de gafas de aumento ajustables (como éstas de Amazon) que les ayuden con sus puntos de cruz.
Fuente(s)
05 de febrero de 2024
Investigadores de la NUS desarrollan un "ojo" impulsado por IA para que las personas con discapacidad visual puedan "ver" los objetos
Assoc Prof Suranga Nanayakkara (izquierda) con el estudiante de la NUS Mark Myres (derecha), que probó AiSee como usuario con discapacidad visual.
Hacer la compra es una actividad habitual para muchos de nosotros, pero para las personas con discapacidad visual, identificar los artículos de la tienda puede resultar desalentador. Un equipo de investigadores de la Escuela de Informática de la Universidad Nacional de Singapur (NUS Computing) presentó AiSee, un dispositivo de asistencia portátil asequible que ayuda a las personas con discapacidad visual a "ver" los objetos que les rodean con ayuda de la inteligencia artificial (IA).
Las personas con discapacidad visual se enfrentan a obstáculos cotidianos, en particular con la identificación de objetos, que es crucial para la toma de decisiones tanto sencillas como complejas. Aunque los avances en IA han mejorado espectacularmente las capacidades de reconocimiento visual, la aplicación en el mundo real de estas tecnologías avanzadas sigue siendo un reto y propensa a errores.
AiSee, que se desarrolló por primera vez en 2018 y se actualizó progresivamente a lo largo de cinco años, pretende superar estas limitaciones aprovechando las tecnologías de IA más avanzadas.
"Con AiSee, nuestro objetivo es capacitar a los usuarios con una interacción más natural. Siguiendo un proceso de diseño centrado en el ser humano, encontramos razones para cuestionar el enfoque típico de utilizar gafas aumentadas con una cámara. Las personas con discapacidad visual pueden ser reacias a llevar gafas para evitar la estigmatización. Por ello, proponemos un hardware alternativo que incorpora unos discretos auriculares de conducción ósea", explica el investigador principal del proyecto AiSee, el profesor asociado Suranga Nanayakkara, del Departamento de Sistemas de Información y Analítica de Informática de la NUS.
El usuario sólo tiene que sujetar un objeto y activar la cámara incorporada para capturar una imagen del mismo. Con la ayuda de la IA, AiSee identificará el objeto, y también proporcionará más información cuando el usuario lo consulte.
¿Cómo funciona AiSee?
AiSee consta de tres componentes clave:
(1) El ojo: El software informático del motor de visión
AiSee incorpora una microcámara que capta el campo de visión del usuario. Ésta constituye el componente de software de AiSee, también denominado "ordenador del motor de visión". El software es capaz de extraer características como texto, logotipos y etiquetas de la imagen captada para su procesamiento.
(2) El cerebro: Unidad de procesamiento de imágenes impulsada por IA y sistema interactivo de preguntas y respuestas
Después de que el usuario tome una foto del objeto de interés, AiSee utiliza sofisticados algoritmos de IA basados en la nube para procesar y analizar las imágenes capturadas e identificar el objeto. El usuario también puede formular una serie de preguntas para saber más sobre el objeto.
AiSee emplea tecnología avanzada de reconocimiento y procesamiento de texto a voz y de voz a texto para identificar los objetos y comprender las preguntas del usuario. Gracias a un amplio modelo lingüístico, AiSee destaca en los intercambios interactivos de preguntas y respuestas, lo que permite al sistema comprender con precisión y responder a las consultas del usuario de forma rápida e informativa.
En comparación con la mayoría de los dispositivos de asistencia vestibles que requieren el emparejamiento con el teléfono inteligente, AiSee funciona como un sistema autónomo que puede funcionar de forma independiente sin necesidad de ningún dispositivo adicional.
(3) El altavoz: Sistema de sonido por conducción ósea
El auricular de AiSee utiliza la tecnología de conducción ósea, que permite la transmisión del sonido a través de los huesos del cráneo. Esto garantiza que las personas con discapacidad visual puedan recibir eficazmente la información auditiva sin dejar de tener acceso a los sonidos externos, como las conversaciones o el ruido del tráfico. Esto es especialmente vital para las personas con discapacidad visual, ya que los sonidos ambientales proporcionan información esencial para la toma de decisiones, sobre todo en situaciones que implican consideraciones de seguridad.
"En la actualidad, los discapacitados visuales de Singapur no tienen acceso a una tecnología de asistencia de IA de este nivel de sofisticación. Por lo tanto, creemos que AiSee tiene el potencial de capacitar a las personas con discapacidad visual para realizar de forma independiente tareas que actualmente requieren asistencia. Nuestro siguiente paso es hacer que AiSee sea asequible y accesible para las masas. Para lograrlo, estamos introduciendo nuevas mejoras, como un diseño más ergonómico y una unidad de procesamiento más rápida", explicó el profesor adjunto Nanayakkara.
El estudiante de la NUS Mark Myres, que ayudó a probar AiSee como usuario con discapacidad visual, comentó: "Muchas veces, los dispositivos de asistencia parecen muy dirigidos a personas totalmente ciegas o con discapacidad visual. Creo que AiSee es un buen equilibrio. Tanto los discapacitados visuales como los ciegos podrían sacarle mucho provecho"
Pruebas con usuarios y nuevas mejoras
El profesor adjunto Nanayakkara y su equipo están actualmente en conversaciones con SG Enable en Singapur para realizar pruebas de usuario con personas con discapacidad visual. Los resultados ayudarán a perfeccionar y mejorar las funciones y el rendimiento de AiSee. Además, B.P. De Silva Holdings Pte Ltd ha hecho una generosa donación de 150.000 dólares singapurenses para apoyar el proyecto.
La decisión de BPH de contribuir al desarrollo de AiSee tiene su origen en su compromiso con la responsabilidad social corporativa y en un auténtico deseo de tener un impacto positivo en la sociedad con una misión más amplia de fomentar la inclusividad y la accesibilidad. Su esfuerzo filantrópico también refleja su creencia en el poder transformador de la tecnología para abordar los retos sociales y crear un mundo más equitativo e inclusivo.
La Sra. Ku Geok Boon, Directora General de SG Enable, declaró: "Las soluciones innovadoras que permiten las tecnologías de asistencia pueden cambiar la vida de las personas con discapacidad, ya sea ayudándolas a vivir de forma más independiente o reduciendo las barreras al empleo. Como agencia central y habilitadora del sector de la discapacidad y la inclusión en Singapur, SG Enable se complace en trabajar con socios como la NUS y B.P. De Silva Holdings Pte Ltd para aprovechar la tecnología con el fin de empoderar a las personas con discapacidad."
Más allá de este proyecto, SG Enable también pretende colaborar con la NUS para explorar cómo la IA, la interfaz persona-ordenador y la tecnología asistencial pueden dar a las personas con discapacidad más opciones tecnológicas.
