¿Cómo utiliza NVIDIA la IA Generativa?

La IA Generativa se está convirtiendo en un fuerte compañero de equipo para el espacio de la Realidad Extendida. Recientemente, Microsoft señaló cómo la RX representa los “ojos y oídos” de la IA.

Así pues, parece que las dos tecnologías emergentes, la Realidad Extendida y la IA, coexisten para mejorar los resultados de los usuarios finales en todos los ámbitos, en lugar de competir.

Sin embargo, aunque la competencia entre ambas tecnologías puede no ser tan drástica como el público pensaba antes. Tras el alejamiento del Metaverso por parte de algunos, en favor de la genAI, puede que esta última sea la que esté recibiendo más atención en la actualidad, pero empresas como Microsoft ya han puesto en marcha hojas de ruta para desarrollar el Metaverso industrial para 2024.

Sin embargo, la genAI no es sólo aplicable a un proveedor de productos inmersivos. La GenAI ya es increíblemente común en el lado de los desarrolladores de hardware y software de Realidad Extendida.

Los motores de desarrollo RT3D como Unreal, Unity y Omniverse también aprovechan la genAI para optimizar los flujos de trabajo de desarrollo, sobre todo para los creadores de contenidos de Realidad Extendida en ciernes.

La escasez de talentos para el desarrollo Realidad Extendida es un problema a medida que aparece nuevo hardware, desde la Realidad Aumentada a la RV, pasando por la RM. Es crucial que los creadores de contenidos diseñen sistemas que vendan aplicaciones para empresas y consumidores.

De lo contrario, ¿por qué debería un usuario comprar unas caras gafas de Realidad Extendida sin una sólida oferta de aplicaciones? GenAI puede simplificar la creación de contenidos de Realidad Extendida y permitir que más personas diseñen servicios de RA/RV/RM.

NVIDIA Omniverse se actualiza a GenAI Core

Rev Lebaredian, vicepresidente de Omniverse y tecnología de simulación en NVIDIA, declaró que la última actualización de Omniverse permite a los desarrolladores de Realidad Extendida flujos de trabajo potenciados por genAI.

Las actualizaciones de genAI forman parte de la introducción por parte de NVIDIA de OpenUSD en sus servicios, un marco gráfico interoperable.

Al aumentar el uso de OpenUSD en Omniverse, NVIDIA puede añadir servicios genAI, como Cesium, Convai, Move AI, SideFX Houdini y Wonder Dynamics, para ayudar en las operaciones de digitalización industrial.

Según Lebaredian, los flujos de trabajo OpenUSD, preparados para GenAI, mejoran las herramientas para desarrolladores de Omniverse, permitiendo a las empresas “construir simulaciones a escala mundial más grandes y complejas como campos de pruebas digitales para sus aplicaciones industriales”.

Además, añadió Lebaredian

Las empresas industriales se apresuran a digitalizar sus flujos de trabajo, lo que aumenta la demanda de ecosistemas de software 3D interoperables, conectados y compatibles con OpenUSD.

La actualización de Omniverse también introduce un Compositor USD que permite a los desarrolladores RT3D diseñar escenas a gran escala utilizando el marco OpenUSD.

Además, Omniverse incorpora Audio2Face, un conjunto de interfaces de programación impulsado por genAI que permite a los desarrolladores de Realidad Extendida crear animaciones faciales y gestos realistas a partir de archivos de audio. La función Audio2Face también admite soporte multilingüe y un nuevo modelo base femenino.

Además, la empresa está añadiendo nuevas plantillas y recursos para desarrolladores con el fin de reducir la entrada al uso de las nuevas herramientas OpenUSD. Las plantillas también dan soporte a una gama más amplia de desarrolladores sin consideraciones de código.

La integración de OpenUSD hace algo más que introducir nuevos servicios genAI en Omniverse. El formato gráfico producido por Pixar abre el producto Omniverse a un número más amplio de casos de uso de la industria, impulsando de nuevo cómo los motores RT3D son herramientas serias para desarrollar soluciones personalizadas.

Mejoras y actualizaciones clave

Entre la integración de genAI y OpenUSD viene una serie de actualizaciones que siguen aumentando las oportunidades disponibles en Omniverse.

NVIDIA está ampliando su Registro de Extensiones del Kit Omniverse con funciones modulares de creación de aplicaciones para mejorar el proceso de creación de aplicaciones personalizadas con acceso adicional a más de 600 extensiones básicas de origen.

NVIDIA también está impulsando la eficiencia y la experiencia de usuario de Omniverse mediante la introducción de optimizaciones de renderizado impulsadas por Ada Lovelace. También está introduciendo funciones como un denoiser de IA que soporta “trazado de trayectorias 4K en tiempo real de escenas industriales masivas”.

Además, NVIDIA está integrando herramientas de desarrollo de Realidad Extendida para diseñar entornos espaciales dentro del ecosistema Omniverse. Por entorno espacial se entiende el espacio informático 3D que rodea al usuario de las gafas, como muestran las Vision Pro de Apple.

La línea de actualizaciones se produce cuando NVIDIA busca liderar el suministro a desarrolladores y usuarios finales empresariales de herramientas para diseñar aplicaciones inmersivas que impulsen resultados positivos para la fuerza de trabajo, junto con casos de uso orientados al consumidor.

NVIDIA amplía el soporte para el desarrollo de Realidad Extendida

La noticia llega después de que NVIDIA se asociara con Varjo en agosto para introducir herramientas de trazado de rayos en su plataforma Omniverse, proporcionando renderizado de alta calidad en la nube para clientes industriales de Realidad Extendida.

Marcus Olssen, Director de Asociaciones de Software de Varjo, declaró entonces:

Las exigencias gráficas y de computación hacían imposible hasta ahora el trazado de rayos de escenas realistas como éstas en RV de alta resolución. Con la compatibilidad con NVIDIA Omniverse, los desarrolladores y usuarios de realidad mixta tendrán la posibilidad de renderizar escenas fotorrealistas en Varjo Realidad Extendida-3 y desbloquear el trazado de rayos en realidad mixta.

En la Conferencia sobre Tecnología para la GPU (GTC) 2023, NVIDIA presentó la plataforma CloudXR 4.0 para escalar las implantaciones de Realidad Extendida en marcos basados en la nube, con flexibilidad adicional y optimizada de servidor y cliente para desarrollar aplicaciones.

Con las actualizaciones, los desarrolladores pueden aprovechar la plataforma para su uso en la nube, en el borde de computación móvil 5G (MEC) y en redes corporativas y empresariales.