Los vendedores de gafas inteligentes comercializan cada vez más dispositivos de Realidad Aumentada como un paradigma que cambia el panorama del hardware para clientes empresariales y consumidores. 

Los principales representantes de dispositivos de Realidad Aumentada, como Meta, RealWear y Qualcomm, destacan cómo el hardware inmersivo ligero puede agilizar las tareas laborales con visuales de realidad asistida. 

Además, las soluciones inmersivas para la atención sanitaria impulsan parcialmente el sector, gracias a las nuevas oportunidades que ofrecen la formación en Realidad Extendida, la telesalud, etc.  

Aunque las soluciones de Realidad Aumentada pueden beneficiar significativamente a los profesionales sanitarios, la RX también tiene el potencial de revolucionar el lado del paciente.  

Recientemente, investigadores australianos de la Universidad de Tecnología de Sydney y de la Universidad de Sydney han realizado un gran avance para fabricar unas gafas “táctiles acústicas”.  

Los investigadores crearon el dispositivo junto con la start-up local ARIA Research para aprovechar el hardware de Realidad Aumentada/computación espacial para ayudar a las personas con baja visión a navegar por los espacios e interactuar con los objetos. 

Los dispositivos de “toque acústico” detectan el entorno del usuario con cámaras de seguimiento espacial y envían información sonora al usuario con baja visión. 

La división de investigación cita datos de la Organización Mundial de la Salud que señalan que aproximadamente 39 millones de personas en todo el mundo son ciegas y 246 millones tienen baja visión; con soluciones de Realidad Aumentada/Inteligencia Artificial, este grupo puede obtener nuevas oportunidades de interactuar con el mundo que les rodea.

El equipo de investigación está trabajando para ayudar a este enorme grupo demográfico con una solución inmersiva que les ayude con las tareas cotidianas. 

Habitualmente, las gafas inteligentes se presentan como una solución que puede ayudar en tareas como la cocina o la navegación mediante paneles visuales de información inmersiva, por ejemplo. La investigación de Sydeny demuestra que la tecnología puede seguir liderando la accesibilidad y permitir que un amplio abanico de usuarios se beneficie de ella a medida que la Realidad Extendida se hace más omnipresente en el trabajo diario y la vida personal.    

Una nueva forma de interactuar  

La computación espacial permite a los usuarios interactuar con los contenidos digitales de nuevas formas, gracias al entorno inmersivo 3D que los rodea. Además, con los visuales de Realidad Aumentada que se superponen al entorno del usuario, la computación espacial también cambia la forma en que los usuarios interactúan con el mundo real.  

Los investigadores universitarios están utilizando la computación espacial y la forma en que la tecnología escanea el entorno del usuario para desarrollar sus gafas inteligentes de “toque acústico”.  

El “toque acústico” utiliza las cámaras exteriores de las gafas inteligentes para detectar datos del entorno real y de los objetos, y los transmite en forma de respuesta sonora para ayudar a navegar a una persona con baja visión. 

Añadió Chin-Teng Lin, líder mundial en investigación de interfaces cerebro-ordenador de la Universidad Tecnológica de Sídney: 

Las gafas inteligentes suelen utilizar la visión por ordenador y otra información sensorial para traducir el entorno del usuario en voz sintetizada por ordenador. Sin embargo, la tecnología táctil acústica sonifica los objetos, creando representaciones sonoras únicas cuando entran en el campo de visión del dispositivo. Por ejemplo, el sonido del susurro de las hojas puede significar una planta, o un zumbido puede representar un teléfono móvil. 

La Realidad Aumentada Accesible para Personas con Baja Visión Obtiene Resultados Positivos 

Los investigadores de Sidney están desarrollando el dispositivo junto con una investigación sobre la eficacia de la tecnología táctil acústica en personas con baja visión. 

El Dr. Howe Zhu, de la Universidad Tecnológica de Sídney, ha publicado recientemente un trabajo de investigación en la revista PLOS ONE, que estudia los resultados de la tecnología táctil acústica en 14 participantes, algunos de ellos con baja visión. 

Durante el estudio, los investigadores de la Universidad probaron sus gafas táctiles acústicas en siete individuos con ceguera o baja visión. Mientras tanto, participó un grupo de control de siete personas videntes con los ojos vendados. 

El Dr. Howe Zhu llegó a la conclusión de que el dispositivo de tacto acústico ayudaba a los siete individuos con ceguera o baja visión a reconocer y alcanzar objetos, utilizando la información espacial del dispositivo para canalizar el asistente de audio.  

Los investigadores también descubrieron que el proceso de identificar y encontrar objetos no suponía una carga mental negativa para los siete individuos con ceguera o baja visión. 

Explicó el Dr. Howe Zhu: 

La retroalimentación auditiva capacita a los usuarios para identificar y alcanzar objetos con notable precisión. Nuestros hallazgos indican que el tacto acústico tiene el potencial de ofrecer un método portátil y eficaz de aumento sensorial para la comunidad de discapacitados visuales. 

Los investigadores señalaron que la tecnología de realidad asistida y su tecnología integrada pueden ayudar a las personas con baja visión a mejorar su calidad de vida con asistencia diaria. 

Nreal y Microsoft ayudan a los niños ciegos con Realidad Aumentada 

La Realidad Extendida es todavía muy incipiente, y la investigación sobre asistencia sanitaria aún está inmadura. Sin embargo, los beneficios están llegando rápidamente.  

La sanidad y la medicina se están introduciendo rápidamente en el espacio de la Realidad Extendida para mejorar los niveles de calidad de vida de los pacientes y las personas que reciben asistencia.  

Sin embargo, a medida que continúe la investigación, pronto llegarán resultados positivos o negativos. Sin embargo, para respaldar los recientes avances positivos de Sydey, el año pasado, Microsoft y el proveedor de gafas inteligentes Xreal -entonces Nreal- se asociaron para desarrollar una solución de Realidad Aumentada/Realidad Asistida para mejorar la interacción social entre los niños ciegos.  

Al igual que el dispositivo táctil acústico de Sydney, Microsoft y Xreal también crearon una tecnología de investigación que ayuda a los niños con baja visión a localizar e identificar a otros aprovechando la computación espacial y la retroalimentación de audio. 

La asociación de 2022 dio como resultado PeopleLens, un dispositivo montado en la cabeza (HMD) que se coloca justo encima de los ojos del usuario y utiliza la detección espacial para localizar a las personas en una habitación, y luego proporciona una señal acústica que lee en voz alta los nombres de las personas cuando el niño las mira. 

Mediante el audio espacial, el HMD localiza a las personas en un espacio para crear un mapa mental del entorno del niño, que Microsoft denominó Mapa de Personas. 

Xreal proporcionó entonces sus gafas inteligentes de Realidad Aumentada Light. El producto aprovechaba una línea de visión digital para detectar la ubicación de las personas y transmitírsela al usuario, lo que permitía a los niños ciegos o con baja visión comprender la posición relativa y la distancia de un grupo. 

PeopleLens también se adelantó a los acontecimientos, utilizando una plataforma de IA para seguir el entorno del usuario en tiempo real. 

Los investigadores de Microsoft utilizan cuatro algoritmos de visión por ordenador de última generación para comprender el entorno de un niño con baja visión, donde la plataforma de IA puede localizar, identificar, seguir y captar la mirada de los compañeros cercanos. 

La plataforma de IA también cose un mapamundi digital basado en datos del mundo real registrados, donde las gafas traducen los datos del mundo real al usuario mediante notificaciones de audio espacial para crear el PeopleMap. 

Microsoft obtuvo resultados positivos basados en el estudio. A continuación, la empresa llevó a cabo una campaña de reclutamiento para encontrar niños del Reino Unido de entre 5 y 11 años para mejorar el producto, como parte de un estudio de investigación en varias fases dirigido por la Universidad de Bristol.  

Realidad Aumentada: los ojos y los oídos de la IA 

La investigación sobre las gafas inteligentes de Realidad Aumentada para ayudar a las personas con baja visión se produce cuando la Realidad Aumentada se enreda con la Inteligencia Artificial para ayudar a una amplia gama de usuarios finales en sus tareas cotidianas. 

El mes pasado, en la Cumbre Snapdragon 2023, Meta subió al escenario de Qualcomm para hablar de la actual integración de la Realidad Extendida en la vida cotidiana. 

La Directora de Asociaciones de Hardware de Meta, Jenniffer Hom, dedicó tiempo a hablar de su asociación con Ray-Ban, que ha dado lugar al desarrollo en curso de una cartera de gafas inteligentes de Realidad Aumentada.  

Las gafas inteligentes Ray Ban pretenden mejorar la vida cotidiana proporcionando asistentes de IA que ayuden en las tareas diarias.  

Mediante la detección de Realidad Aumentada a través de cámaras orientadas hacia el exterior, el dispositivo puede responder orgánicamente al entorno del usuario, al igual que los dispositivos contemporáneos, como el dispositivo táctil acústico Syndey. 

señaló Jenniffer Hom: 

Las gafas inteligentes se convertirán en los ojos y oídos de los asistentes virtuales de IA, permitiendo a la gente experimentar la IA de la forma más humana: con nuestros sentidos. Guiándote en la preparación de tu próxima comida familiar, ayudando a padres mayores a leer un menú con letra pequeña, o eliminando barreras entre dos desconocidos al traducir su conversación en tiempo real. Me complace anunciar que tenemos varios socios OEM desarrollando gafas inteligentes basadas en Snapdragon AR1. Estas gafas no sólo dispondrán de cámara, audio y capacidades de IA, sino que también contarán con una pantalla monocular o binocular. Esperamos ver el lanzamiento de estos diseños por parte de estos clientes el año que viene. 

Además, Hom dijo que “muy pronto, podrás hacer una pregunta a tu Meta AI, y la AI te responderá con el contexto de ver y oír a través de tus gafas inteligentes”. 

Por otro lado, Microsoft compartía un sentimiento similar.  

En agosto de este año, Lili Cheng, Vicepresidenta Corporativa de Aplicaciones y Plataformas Empresariales de Microsoft, escribió sobre las claves del éxito de la Realidad Extendida para los trabajadores de primera línea, destacando cómo la IA es una tecnología fundamental para el éxito de la Realidad Extendida en el lugar de trabajo.  

Las gafas inteligentes y las soluciones de Realidad Extendida de fácil acceso proporcionan un conjunto de herramientas inmersivas adecuadas para el trabajo de primera línea. Además, gracias a un factor de forma más ligero, las gafas inteligentes y los dispositivos de realidad asistida están ganando terreno masivamente en el mantenimiento y otras funciones de primera línea gracias a la visualización de datos con manos libres. 

Cheng explicó que en los entornos industriales de primera línea, la información valiosa “se limita a individuos, grupos o departamentos”, pero la Realidad Aumentada tiene el poder de “cambiar esta dinámica”.  

Cheng también añadió: 

Los trabajadores pueden compartir vídeos situacionales en tiempo real de su entorno, permitiendo que otros lo experimenten de primera mano, independientemente de su ubicación. La orientación de expertos, la solución de problemas o las instrucciones paso a paso son inmediatas. Esto elimina la necesidad de desplazarse, al tiempo que minimiza el tiempo de inactividad y las interrupciones de la producción. 

El ejecutivo de Microsoft mencionó la importancia y las funciones de las tecnologías integradas, como los gemelos digitales, explicando que la visualización y los datos RT3D permiten a los trabajadores de primera línea “recibir una mejor comprensión de las máquinas y los procesos en cuestión”. 

Cheng también añadió que el acceso a materiales relacionados, como los gemelos digitales, puede “mejorarse aún más con la IA”: 

La realidad mixta son los ojos y los oídos de la IA. Profundizar en los matices de las operaciones para un aprendizaje personalizado y en profundidad resulta más fácil. Cuando se integran, la realidad mixta y la IA aceleran la formación de los trabajadores, acortando los pasos y proporcionando a los usuarios los conocimientos prácticos que necesitan para la tarea en cuestión. 

Ya sea para el consumidor, la empresa o la sanidad, una nueva tendencia parecen ser las gafas inteligentes de Realidad Aumentada con IA.  

Los principales proveedores de tecnología de Realidad Extendida parecen fusionar la tecnología de RA y la de IA para mejorar sus productos. Pero la inversión conjunta en tecnología también respalda los proyectos de IA en los que Meta, Microsoft y Apple están trabajando en segundo plano.