Omniverse de Nvidia para colaboraciones de trabajo

[3dpoder]

Audio2Face genera mezclas faciales. Nvidia ha publicado Omniverse Audio2Face 2021.3.2, la última versión de su software experimental gratuito basado en IA para generar animación facial a partir de fuentes de audio.

La versión agrega la opción de generar un conjunto de formas de mezcla facial; estas formas abarcan una amplia gama de expresiones para personalizar los modelos a tu gusto. Luego puedes exportar los modelos en formato USD para editarlos en software DCC como Autodesk Maya o Blender 3. Sin olvidar su paso adelante para ser compatible con MetaHuman Creator, el software que genera personajes 3D de Epic Games.

Genera sincronización de labios automática y animación facial para personajes de Character Creator a partir de archivos de audio. Audio2Face es una herramienta entrenada por IA para generar animación facial sobre un personaje 3D a partir de fuentes de audio; grabaciones de voz o una transmisiones de audio en vivo.

Audio2Face 2021.3.2 incluye un reproductor de audio en streaming. Permite transmitir datos de audio al software desde fuentes externas como aplicaciones de texto a voz a través del protocolo gRPC.

Se puede utilizar conjuntamente con Omniverse Machinima

Junto con la aplicación hermana Omniverse Machinima, el software es una de un conjunto de nuevas herramientas de juegos que Nvidia está desarrollando en torno a Omniverse. Su nueva plataforma de colaboración en tiempo real basada en USD.

Esta versión de Audio2Face ofrece más opciones para controlar las animaciones faciales a través de su sistema de trabajo basado en la forma de mezcla facial. En la versión inicial, la única forma de modificar la animación que genera Audio2Face era a través de parámetros modificable solo mediante postproceso. Pero Nvidia ha empezado a implementar un flujo de trabajo alternativo basado en formas de mezcla facial.

Audio2Face genera mezclas faciales y además tiene ya lista para usar

El video que publicamos muestra el software que se utiliza para transferir un conjunto de 46 formas de mezcla listas para usar. Estas cubren una gama estándar de expresiones faciales desde el activo A2F a una cabeza totalmente personalizada.

El proceso de transferencia se puede controlar ajustando los puntos de correspondencia que identifican características equivalentes. Como las ubicaciones de los mismos rasgos faciales en los dos modelos de cabeza. El proceso conserva los UV, lo que permite reutilizar las texturas faciales originales.



Puedes descargar Audio2Face aquí.

[3dpoder]

Nvidia anuncia Omniverse Cloud para conectar a diseñadores y creadores de contenido. El nuevo conjunto de servicios en la nube permitirá el acceso instantáneo y en tiempo real a la plataforma Nvidia Omniverse para la colaboración interactiva en el diseño 3D, lo que permitirá incluso a los espectadores no técnicos acceder a escenas con simulación y renderizado completos a través de la plataforma Nvidia GeForce NOW.

Una imagen que muestra la colaboración multiusuario en la nube en Nvidia Omniverse View.

Nvidia acaba de anunciar Omniverse Cloud, un conjunto de servicios en la nube que brinda a artistas, creadores, diseñadores y desarrolladores acceso instantáneo a la plataforma Nvidia Omniverse para la colaboración y simulación de diseño 3D desde hasta miles de millones de dispositivos.

Entre los servicios de Omniverse Cloud se encuentra Nucleus Cloud, una sencilla herramienta de intercambio de un clic para colaborar que permite a los artistas acceder y editar grandes escenas 3D desde cualquier lugar, sin tener que transferir conjuntos de datos masivos. También incluye Omniverse Create, una aplicación para diseñadores técnicos, artistas y creadores para construir mundos 3D de forma interactiva en tiempo real; y View, una aplicación para que los usuarios no técnicos vean las escenas de Omniverse transmitiendo capacidades completas de simulación y renderizado utilizando la plataforma Nvidia GeForce NOW, impulsada por GPU Nvidia RTX en la nube.

Nvidia Omniverse Cloud conecta de forma remota

Jensen Huang, fundador y CEO de Nvidia, dijo: Los diseñadores que trabajan de forma remota colaboran como si estuvieran en el mismo estudio. Los planificadores de fábrica trabajan dentro de un gemelo digital de la planta real para diseñar un nuevo flujo de producción. Los ingenieros de software prueban una nueva versión de software en el gemelo digital de un automóvil autónomo antes de lanzarlo a la flota. Se avecina una nueva ola de trabajo que solo se puede hacer en mundos virtuales. Omniverse Cloud conectará a decenas de millones de diseñadores y creadores, y miles de millones de futuras IA y sistemas robóticos.

Con Omniverse Cloud, los creadores pueden iterar, compartir y colaborar en modelos almacenados en Nucleus Cloud desde cualquier lugar, e invitar instantáneamente a otros colaboradores a unirse a una sesión enviando un enlace. Los usuarios o equipos sin sistemas GeForce o Nvidia RTX de gama alta pueden aprovechar todas las potencias de Omniverse Create and View simplemente suscribiéndose al programa Omniverse Cloud.

En su discurso de apertura en Nvidia GTC, Huang mostró una demostración del futuro del diseño con tres diseñadores humanos y un diseñador especializado en Omniverse Avatar AI que colaboran virtualmente en Omniverse Cloud, realizando cambios de diseño en un proyecto arquitectónico.

La aplicación Omniverse Avatar está actualmente en desarrollo. Aunque puedes probar la tecnología con Omniverse Audio2Face.

Nvidia Omniverse Cloud conecta con GeForce NOW

El equipo conversó utilizando una herramienta de conferencia web estándar, mientras estaba conectado en una escena alojada en Nucleus Cloud. Un diseñador humano ejecutó la aplicación Omniverse View en su estación de trabajo con tecnología RTX, mientras que los otros dos transmitieron Omniverse View desde GeForce NOW a su computadora portátil y tableta.

En KPF, un líder mundial en diseño arquitectónico, valoramos la capacidad de nuestros diseñadores para colaborar de la manera más fluida posible al hacer que las tecnologías de nube estén disponibles para ellos cuando lo necesiten, dijo Cobus Bothma, director de Investigación Aplicada de Kohn Pedersen Fox Associates.

Omniverse Cloud encaja perfectamente en esa práctica con la promesa de sobresalir en nuestras habilidades de colaboración de diseño visual y 3D al permitir que nuestros equipos trabajen en Omniverse desde cualquier dispositivo, en cualquier lugar.

La colección completa de servicios de Omniverse Cloud está en desarrollo. Nucleus Cloud para el uso compartido simple con un solo clic está aceptando aplicaciones para el acceso anticipado.

Para obtener más información sobre Nvidia Omniverse, mira la Keynote GTC 2022 de Huang. Regístrese en GTC de forma gratuita para asistir a sesiones con Nvidia y líderes de la industria.

Fuente: Nvidia

[3dpoder]

El gerente general de medios y entretenimiento de Nvidia, Richard Kerris, ha presentado una serie de nuevos lanzamientos. Próximas actualizaciones y planes futuros para el creciente ecosistema que rodea la nueva y poderosa plataforma de colaboración de diseño 3D interactiva y en tiempo real de la compañía.

Richard Kerris, gerente general de la industria de Nvidia para medios y entretenimiento; acaba de compartir una publicación que destaca una gran cantidad de nuevas actualizaciones de Omniverse. Y próximos lanzamientos de particular importancia para las industrias de animación, juegos y VFX.

Más de 150.000 usuarios han descargado Omniverse; Las nuevas formas de integrar el sistema con herramientas de la industria. Léase Autodesk Maya, Substance 3D y Unreal Engine 5. Que están permitiendo a millones de diseñadores de todo el mundo aprovechar esta nueva y poderosa plataforma basada en la nube.

Las nuevas versiones y actualizaciones para Omniverse incluyen los últimos conectores y bibliotecas de Omniverse. Ampliando el ecosistema de la plataforma y consiguiendo que Omniverse sea más accesible para creadores, desarrolladores, diseñadores, ingenieros e investigadores de todo el mundo.

Richard Kerris ha señalado una serie de grandes clientes de Nvidia Omniverse Enterprise. Incluidos Amazon, DB Netze, Kroger, Lowe’s, PepsiCo y la compañía líder en animación y VFX DNEG. Todos están utilizando la plataforma para construir gemelos digitales físicamente precisos o desarrollar experiencias inmersivas realistas para los clientes.

Mejora de la creación de contenido con nuevas conexiones y bibliotecas

Richard Kerris destaca cómo en el último año, el ecosistema Omniverse ha ampliado las posibilidades de diseño y creación de contenido de la plataforma. Es capaz de establecer 82 conexiones en los proveedores de herramientas de software más grandes e importantes de la industria.

Esto impacta directamente en el espacio de M&E con los siguientes elementos de expansión:

Las nuevas conexiones de terceros para Adobe Substance 3D Material Extension y Painter Connector, Epic Games Unreal Engine Connector y Maxon Cinema 4D; permitirán flujos de trabajo de sincronización en vivo entre aplicaciones de terceros y Omniverse.

Nuevos importadores CAD: Estos convierten 26 formatos CAD comunes a Universal Scene Description (USD). Para permitir mejor los flujos de trabajo de fabricación y diseño de productos dentro de Omniverse.

Nuevas integraciones de bibliotecas de activos: Los activos TurboSquid de Shutterstock, Sketchfab y Reallusion ActorCore; están directamente disponibles en los navegadores de activos de Omniverse Apps. Simplemente los buscas, arrastras y sueltas. Cerca de un millón de activos 3D listos para Omniverse. Los nuevos activos, materiales, texturas, avatares y animaciones 3D, están listos para Omniverse y disponibles en A23D.

Nuevo soporte para delegados de Hydra Render: Los usuarios pueden integrar y alternar entre sus renderizadores favoritos compatibles con delegados de Hydra; y el Renderizador Omniverse RTX directamente dentro de las aplicaciones de Omniverse. Disponible en versión beta para Chaos V-Ray, Maxon Redshift y OTOY Octane. Próximamente estará disponible para Blender Cycles y Arnold Render.

Las características y la disponibilidad de Omniverse Enterprise se amplían

Richard Kerris destaca las nuevas actualizaciones que llegarán a Omniverse Enterprise. Incluidas las últimas versiones de Omniverse Kit 103, Omniverse Create and View 2022.1, Omniverse Farm y DeepSearch.

Omniverse Enterprise en Nvidia LaunchPad está disponible en nueve regiones del mundo. Nvidia LaunchPad ofrece a los profesionales del diseño y revisores de proyectos acceso instantáneo y gratuito. Es un servicio llave en mano a los laboratorios prácticos de Omniverse Enterprise, ayudándoles a tomar decisiones de software e infraestructura más rápidas y seguras.

Elevando el listón de los gemelos digitales

Nvidia anuncia Nvidia OVX, una arquitectura de sistema informático diseñada para alimentar gemelos digitales a gran escala. Nvidia OVX está diseñado para operar simulaciones complejas que se ejecutarán dentro de Omniverse. Lo que permitirá a los diseñadores, ingenieros y planificadores crear gemelos digitales físicamente precisos y entornos de simulación reales.

Últimas tecnologías y características de Omniverse

Richard Kerris también destaca las principales versiones y posibilidades anunciadas para Omniverse, incluidas las siguientes:

Nuevas herramientas para desarrolladores: Omniverse Code, una aplicación que sirve como entorno de desarrollo integrado para desarrolladores. Permite a los usuarios crear fácilmente sus propias extensiones, aplicaciones o microservicios de Omniverse.

DeepSearch: un nuevo servicio de búsqueda basado en IA. Este permite a los usuarios buscar rápidamente a través de bibliotecas de activos 3D masivas y sin etiquetar utilizando lenguaje natural o imágenes. DeepSearch está disponible para los clientes de Omniverse Enterprise en acceso anticipado.

Omniverse Replicator: un marco para generar datos sintéticos 3D físicamente precisos para acelerar el entrenamiento y la precisión de las redes de percepción. Disponible dentro de Omniverse Code para que los desarrolladores puedan construir sus propios motores de datos sintéticos específicos del dominio.

OmniGraph, ActionGraph y AnimGraph: grandes novedades que controlan el comportamiento y la animación.

Omniverse Avatar: una plataforma que utiliza IA y tecnología de simulación para permitir a los desarrolladores construir avatares personalizados, inteligentes y realistas.

Aplicación Omniverse XR: una configuración optimizada para VR de Omniverse View que permite a los usuarios experimentar sus escenas 3D de fidelidad completa; con trazado de rayos RTX completo, a escala 1: 1.

Dejamos un video con algunas demostraciones de lo anterior



Para obtener más información sobre Nvidia Omniverse, puedes registrarse en GTC 2022 de forma gratuita para asistir a las sesiones.

[3dpoder]

Nvidia Omniverse Create añade nuevas herramientas Nvidia Omniverse Create añade nuevas herramientas, como un nuevo conjunto explícito para la animación. Que incluyen una línea de tiempo; un editor de curvas y un editor de gráficos basado en nodos. Además de física de cuerpos blandos, soporte para curvas USD (Universal Scene Description), para cabello y soporte para AOV al renderizar.

Estas nuevas funciones de la herramienta han sido desveladas en el transcurso del evento GTC 2022 de Nvidia. Donde también han publicado los nuevos conectores Unreal Engine 5 y Substance 3D Painter. Así como la opción de usar renderizadores de terceros en la ventana gráfica Omniverse.

Los datos se intercambian entre aplicaciones CAD y DCC compatibles. Nvidia Omniverse Create en formato USD, dispone de complementos para conectar con herramientas como 3ds Max, Autodesk Maya, Revit, Rhino, SketchUp y Unreal Engine.

Además del núcleo de Omniverse, Nvidia ha publicado aplicaciones frontend para tareas específicas. Incluyendo Omniverse Create para el diseño y la edición de escenas, y Omniverse View para la revisión de escenas.



Nvidia Omniverse Create en la animación

Los animadores disponen de un conjunto estándar de herramientas para crear y editar animaciones mediante fotogramas clave. Incluido un editor de línea de tiempo y curvas. Permite reorientar la animación de un personaje a otro.

Regargeting actualmente solo funciona con bípedos, pero hay ajustes preestablecidos para Character Creator de Reallusion; y por extensión, personajes de su biblioteca ActorCore, y otras bibliotecas de terceros como RenderPeople.

Sin embargo, el conjunto de herramientas está enfocado más concretamente hacia los motores de juego que no hacia las aplicaciones DCC como Autodesk Maya o Blender. Nvidia Omniverse Create dispone de otras características que incluyen un gráfico de animación basado en nodos para la reproducción y mezcla de animación en tiempo de ejecución.

Los usuarios pueden crear interacciones en tiempo de ejecución. Por ejemplo, activar un personaje para que se mueva en respuesta a un comando de teclado; a través de Action Graph, un entorno de scripting visual basado en nodos. Añade un secuenciador estilo Unreal Engine para ordenar clips de animación en una cinemática.



La física de cuerpos blandos basada en PhysX 5.0

Nvidia Omniverse Create también agrega soporte para la física de cuerpos blandos, además de la dinámica de cuerpo rígido existente. La implementación admite telas, objetos deformables, objetos inflables como globos, y al estar basada en PhysX 5.0. La última versión del marco de simulación en tiempo real de Nvidia, está acelerada por GPU.

La actualización integra Warp, el marco de Nvidia para traducir código Python a código CUDA. Lo que hace posible que los desarrolladores creen Sims en Python y hagan que Warp los traduzca para que se ejecuten de manera eficiente en la GPU.

Nuevas características de renderizado en Nvidia Omniverse Create, como curvas NURBS, AOVs y capturadores de sombras. Los usuarios obtienen soporte para editar y renderizar curvas NURBS, lo que permite trabajar con caracteres importados con cabello basado en curvas.

Vemos nuevas características de renderizado incluyen soporte para variables de salida arbitrarias (AOV). De esa forma se obtiene un control más exacto sobre el aspecto de la salida renderizada a través de la composición.



Objetos Mate y USD Geom Points

La actualización agrega lo que Nvidia llama Objetos Mate, pero que los usuarios de aplicaciones DCC probablemente conocerán como objetos invisibles. Estos atrapan sombras y reflejos, para resaltar los entornos y contornos de objetos 3D.

Nvidia Omniverse Create proporciona un conjunto de planos de tierra listos para usar con captadores de sombras a través del Sky Browser. Ahora renombrado Environment Browser para reflejar su funcionalidad más amplia.

Soporte para USD Primvars y soporte para USD Geom Points en el renderizador RTX incorporado de Omniverse. Pensado para efectos de renderizado como lluvia, polvo y chispas.

Ahora también es posible cambiar la ventana gráfica de RTX Renderer a una gama de delegados de renderizado Hydra. Inicialmente el renderizador nativo USD HdStorm, con motores de terceros como Redshift y V-Ray.

Nvidia Omniverse Create está disponible para Windows 10 y CentOS 7/Ubuntu 18.04 Linux. Se instala desde el lanzador principal de Omniverse. Requiere una GPU Nvidia GeForce RTX 3070 o superior.

[3dpoder]

Simple Share comparte entre artistas individuales. Nvidia ha lanzado un segundo servicio Omniverse Cloud en acceso anticipado. Al igual que Nucleus Cloud, Simple Share es un sistema de colaboración en línea, pero dirigido a artistas individuales en lugar de equipos.

Mientras que Nucleus Cloud requiere que los equipos configuren instancias basadas en la nube a través de las cuales se pueden compartir escenas; Simple Share simplemente genera un enlace en línea que se puede enviar a los colaboradores.

Disponibilidad y requisitos del sistema

Nucleus Cloud y Simple Share están actualmente disponibles en acceso anticipado gratuito para usuarios con cuentas de desarrollador de Nvidia. Para registrarse, debe aceptar el acuerdo de acceso anticipado de Nvidia.

El conjunto completo de servicios de Omniverse Cloud, incluida la transmisión de aplicaciones, tendrá acceso anticipado este año. Puede encontrar más información sobre los requisitos del sistema en la historia anterior. Nvidia aún no ha anunciado los precios.

GTC: Nvidia anunció hoy Omniverse Cloud, un conjunto de servicios en la nube que brinda a los artistas; creadores, diseñadores y desarrolladores acceso instantáneo a la plataforma Nvidia Omniverse para la colaboración y simulación de diseño 3D desde miles de millones de dispositivos.

Entre los servicios de Omniverse Cloud se encuentra Nucleus Cloud, una sencilla herramienta para compartir de un clic; para colaborar que permite a los artistas acceder y editar grandes escenas en 3D desde cualquier lugar, sin tener que transferir conjuntos de datos masivos.

Simple Share comparte entre artistas individuales

Omniverse Create para diseñadores técnicos

También incluye Omniverse Create, una aplicación para diseñadores técnicos, artistas y creadores para construir mundos 3D de forma interactiva en tiempo real; y View, una aplicación para que los usuarios no técnicos vean escenas de Omniverse transmitiendo capacidades completas de simulación y renderizado; utilizando la plataforma Nvidia GeForce NOW, con tecnología de GPU Nvidia RTX en la nube.

Los diseñadores que trabajan de forma remota colaboran como si estuvieran en el mismo estudio. Los planificadores de fábrica trabajan dentro de un gemelo digital de la planta real para diseñar un nuevo flujo de producción. Los ingenieros de software prueban una nueva versión de software en el gemelo digital de un automóvil autónomo antes de lanzarlo a la flota.

Se avecina una nueva ola de trabajo que solo se puede realizar en mundos virtuales, dijo Jensen Huang, fundador y director ejecutivo de Nvidia. Omniverse Cloud conectará a decenas de millones de diseñadores y creadores, y miles de millones de futuras IA y sistemas robóticos.

Simple Share RTX comparte entre artistas individuales

Nucleus Cloud te permite trabajar desde cualquier lugar

Usando Omniverse Cloud, los creadores pueden iterar, compartir y colaborar en modelos almacenados en Nucleus Cloud; desde cualquier lugar e invitar instantáneamente a otros colaboradores a unirse a una sesión enviando un enlace. Los usuarios o equipos sin sistemas GeForce o Nvidia RTX de gama alta, o que deseen reforzar la infraestructura de TI; pueden aprovechar todos los poderes de Omniverse Create and View simplemente suscribiéndote al programa Omniverse Cloud.

En su discurso de apertura en Nvidia GTC, Huang mostró una demostración del futuro del diseño con tres diseñadores humanos; y un diseñador especialista en Omniverse Avatar AI que colaboran virtualmente en Omniverse Cloud, realizando cambios de diseño en un proyecto arquitectónico.

El equipo conversó usando una herramienta de conferencia web estándar, mientras estaba conectado en una escena alojada en Nucleus Cloud. Un diseñador humano ejecutó la aplicación Omniverse View en su estación de trabajo con tecnología RTX; mientras que los otros dos transmitieron Omniverse View desde GeForce NOW a su computadora portátil y tableta.

En KPF, líder mundial en diseño arquitectónico, valoramos la capacidad de nuestros diseñadores; para colaborar de la mejor manera posible al poner a su disposición tecnologías basadas en la nube cuando las necesitan; dijo Cobus Bothma, director de Investigación Aplicada de Kohn Pedersen. Fox Asociados. Omniverse Cloud encaja perfectamente en esa práctica con la promesa de mejorar nuestras capacidades de colaboración de diseño visual y 3D; al permitir que nuestros equipos trabajen en Omniverse desde cualquier dispositivo y en cualquier lugar.

La colección completa de servicios de Omniverse Cloud está en desarrollo. Nucleus Cloud para compartir con un solo clic está aceptando aplicaciones para acceso anticipado.

Dejamos el video con la presentación

[3dpoder]

MDL Distiller y GLSL backend son de código abierto. Ya hace unos meses que Nvidia anunciaba este dato, lo hizo en el Siggraph de este año. Ahora han publicado que ya está disponible por completo su lenguaje de definición de materiales multiplataforma.

Ambos garantizan que los materiales del mundo real se muestren de manera consistente en todas las aplicaciones. Está desarrollado para garantizar que los materiales físicos se muestren de manera consistente en diferentes versiones de los renderizadores propios de Nvidia. Así como en Iray y el ya desaparecido Mental Ray, MDL Distiller y GLSL backend se han adoptado desde entonces en otras herramientas de DCC.

MDL Distiller es compatible con el software, incluidas las herramientas de creación de materiales de Adobe, Substance 3D Designer y Substance 3D Painter, el renderizador V-Ray de Chaos y Unreal Engine. Así como con la biblioteca de recursos de Megascans. También es el formato de material estándar dentro de Omniverse, la plataforma colaborativa de diseño 3D en línea de Nvidia.

MDL Distiller y GLSL backend son de código abierto

MDL Distiller en render a tiempo real

Las nuevas funciones de código abierto ayudan a admitir MDL Distiller en renderizadores en tiempo real. El backend GLSL brinda soporte para OpenGL Shading Language, el principal lenguaje de sombreado utilizado por la API de gráficos OpenGL, y Vulkan, su sucesor.

Ambos son ampliamente utilizados en motores de renderizado en tiempo real, incluidos los renderizadores de vistas de las aplicaciones DCC. Aunque algunas aplicaciones ahora se están alejando de OpenGL para el renderizado de vistas, Vulkan está ganando terreno. Es compatible con Substance 3D Stager de Adobe y se espera que sea compatible con el renderizador Eevee de Blender.

MDL Distiller también ayuda a los desarrolladores de motores de render con menos capacidad gráfica a admitir materiales MDL, simplificando automáticamente los materiales MDL a modelos de materiales reducidos.

Versiones separadas de un mismo material

Está destinado a evitar que los artistas tengan que crear versiones separadas de un material: una versión completa, más variantes simplificadas para renderizadores que no admiten todas sus funciones.

En su lugar, los desarrolladores de procesadores proporcionan reglas de MDL Distiller sobre cómo se debe convertir el material completo.

Cuando se agregan nuevas funciones al renderizador, las reglas de Distiller se pueden actualizar junto con ellas, lo que significa que los materiales MDL existentes admiten esas nuevas funciones sin tener que volver a crearlas.

Requisitos de MDL Distiller y GLSL backend

El código fuente de MDL SDK está disponible bajo una licencia BSD de 3 cláusulas. Los binarios compilados de la última versión, MDL SDK 2021.1.4, están disponibles para Windows 7+, Linux y macOS.

[3dpoder]

Nvidia ha presentado su última demostración de la aplicación Audio2Face de Omniverse, que utiliza la tecnología de audio a animación. El personaje 3D se ha representado con las nuevas capacidades de sombreado SSS con trazado de rayos en tiempo real en Omniverse Kit 105, que se lanzará a finales de esta primavera.

Además, Nvidia ha anunciado nuevas actualizaciones para Omniverse, su plataforma de colaboración de diseño 3D en tiempo real. Las actualizaciones incluyen nuevos complementos de integración para Unity y la plataforma de datos geoespaciales Cesium, así como la próxima dispersión del subsuelo con trazado de rayos en tiempo real y nuevas capacidades de texto a materiales basadas en IA en Omniverse Kit.

Nvidia se asocia con Shutterstock para desarrollar IA de texto

Estos anuncios se realizaron en GTC 2023, donde también se presentaron seis nuevas GPU RTX profesionales y una asociación con Shutterstock para desarrollar un nuevo servicio generativo de texto a modelo 3D con IA.

Lanzada oficialmente el año pasado después de un año en versión beta, Omniverse es una plataforma de colaboración basada en USD para VFX, desarrollo de juegos, diseño y visualización. La plataforma permite a artistas y diseñadores de todo el mundo colaborar en proyectos en tiempo real mediante el intercambio de datos entre aplicaciones CAD y DCC compatibles y Omniverse en formato USD. Complementos de conector están disponibles para herramientas como 3ds Max, Maya, Revit, Rhino, SketchUp y Unreal Engine.

Nuevos nombres para Omniverse Create y Omniverse View

Nvidia ha lanzado aplicaciones frontend específicas para tareas, incluyendo Omniverse Create para el diseño y la edición de escenas, y Omniverse View para la revisión de escenas, además del núcleo de Omniverse.

Anteriormente, estas aplicaciones se conocían como Omniverse Create y Omniverse View, pero uno de los cambios de la primavera de 2023 es el cambio de nombre de Omniverse Create a USD Composer y Omniverse View a USD Presenter.

Nuevas herramientas de IA generativa y SSS en tiempo real

La última versión de Omniverse Kit, su SDK para crear aplicaciones de Omniverse, es Omniverse Kit 105, que se lanzará esta primavera. Nvidia presentó una vista previa de las nuevas funciones en esta versión, que incluyen el "primer sombreador de dispersión del subsuelo con trazado de rayos en tiempo real". Se utiliza para representar la piel del personaje digital en el video que se muestra en la parte superior de la historia.

Además, la actualización contará con nuevas funciones generativas de IA, incluyendo capacidades de texto a materiales y de texto a código, y 1,000 nuevos activos en la colección SimReady de Nvidia de activos 3D listos para usar.

Si quieres descargar el sistema Omniverse, puedes hacerlo desde la web de Nvidia aquí.

[3dpoder]

Nvidia está presentando sus últimas actualizaciones del año 2023.1 para aplicaciones en Omniverse, su plataforma de colaboración en diseño 3D en tiempo real. Esto incluye USD Composer y Presenter, antes conocidos como Omniverse Create y View, además de Audio2Face.

USD Composer 2023.1 agrega nuevas funciones para crear y visualizar diferentes variantes de diseño. También aborda problemas con activos importados y permite grabar simulaciones, además de contar con capacidades de visualización XR nativas.

Por su parte, USD Presenter 2023.1 redefine su enfoque como una herramienta especializada para marcar y visualizar escenas, optimizando la interfaz de usuario para una mejor experiencia.

En cuanto a Audio2Face 2023.1, introduce la opción de transmitir formas de mezcla facial desde la herramienta de animación de inteligencia artificial a software DCC como Unreal Engine. También se incluye un nuevo modelo de inteligencia artificial basado en un personaje femenino chino.

(Vale la pena mencionar que las actualizaciones de USD Composer y Audio2Face han estado disponibles durante algunas semanas, pero no pudimos informar sobre ellas en ese momento).

Omniverse es una plataforma de colaboración basada en OpenUSD que se utiliza en campos como VFX, desarrollo de juegos, diseño y visualización. Lanzada oficialmente el año pasado después de un período en versión beta, Omniverse facilita la colaboración en proyectos en tiempo real entre artistas y diseñadores de todo el mundo.

La plataforma permite el intercambio de datos entre aplicaciones CAD y DCC compatibles con Omniverse en formato OpenUSD. Además, se ofrecen complementos de conexión para herramientas como 3ds Max, Maya, Revit, Rhino, SketchUp y Unreal Engine.

Aunque inicialmente se lanzó para diversos mercados, como VFX y desarrollo de juegos, el enfoque actual del sitio web de Nvidia para el producto se centra más en casos de uso industriales, como los gemelos digitales.

[3dpoder]

USD Composer 2023.1 trae consigo herramientas frescas para la creación y visualización de diseños variados. Esta actualización sustancial en la herramienta de composición de escenas, antes conocida como Omniverse Create, introduce nuevas funciones que permiten generar y exhibir variantes de diseño.

Un recién estrenado Variant Editor hace que la generación de variantes USD sea más sencilla. Estas variantes pueden ser observadas y gestionadas mediante el nuevo Variant Presenter, ahora también disponible en la herramienta complementaria USD Presenter.

Las mejoras no se detienen ahí, ya que se añaden funciones adicionales para abordar problemas con activos importados, así como la capacidad de grabar animaciones y simulaciones. El Validador de activos se presenta como una herramienta para identificar y resolver inconvenientes técnicos con activos importados. Además, el Metrics Assembler realiza automáticamente conversiones de unidades de escala y ejes de coordenadas.

En el ámbito de la animación y la simulación, la actualización implementa un sistema de navegación tipo juego para agentes de escena, junto a un grabador de escena que captura tomas de animación y simulación.

Mejoras adicionales se aplican a funciones existentes, como la generación de UV en el Optimizador de escena, y se habilita la edición directa de superficies de vista previa de USD en el Editor de materiales.

Y eso no es todo, ya que se introduce un nuevo eliminador de ruido y un destilador "significativamente mejorado" para materiales en formato MDL, mejorando la coherencia visual entre los modos de renderizado RTX en tiempo real y RTX interactivo.

[3dpoder]

USD Presenter 2023.1 llega con una nueva interfaz optimizada que presenta tres modalidades de uso. Esta herramienta, antes conocida como Omniverse View, ha sido revisada en términos de su interfaz de usuario.

En esta versión, USD Presenter 2023.1 ha eliminado la opción de crear archivos nuevos, para centrarse en su papel como visor de escenas puro, e introduce tres modos de operación: Visualización, Revisión y Aprobación.

El modo Visualización permite examinar las escenas con diversas opciones de calidad de renderizado disponibles.

El modo Revisión añade funcionalidades de anotación, medición y análisis de escenas. Incluye herramientas para estudios de iluminación solar, opciones de renderizado avanzadas como el modo de visualización en blanco y secciones, además de la capacidad para grabar secuencias de video.

El modo Aprobación está diseñado para que los clientes y supervisores aprueben las anotaciones realizadas durante la revisión, aunque se menciona que la versión actual no está completamente al 100% en este aspecto.

[3dpoder]

Audio2Face 2023.1 lleva la generación de animaciones faciales mediante IA de Nvidia a un nuevo nivel, permitiendo transmitir en vivo las formas de mezcla facial a otras aplicaciones, como Unreal Engine.

Antes, con Audio2Face 2023.1, el proceso de importar manualmente las formas de mezcla era necesario.

El video de arriba ilustra cómo funciona este proceso con un personaje MetaHuman en Unreal Engine. Aunque las notas de lanzamiento mencionan un complemento de enlace en vivo para Unreal Engine 4, no se hace referencia a Unreal Engine 5.

En esta versión, destaca la introducción de Claire, un nuevo modelo de IA basado en una mujer china, que se suma a Mark, el modelo de IA preexistente, que representa a un hombre blanco.

Los usuarios pueden alternar entre ambos modelos a través de un panel dedicado.

Además, ahora el software genera formas combinadas para la lengua y el resto de la cara del personaje. Además, es posible exportar los fotogramas clave de emociones en formato JSON.

En cuanto a disponibilidad y requisitos del sistema, las aplicaciones Omniverse son compatibles con Windows 10+ y CentOS 7/Ubuntu 20.04+ Linux. En su mayoría, requieren una GPU Nvidia GeForce RTX 3070 o superior.

[3dpoder]

Nvidia publica sus últimas actualizaciones para Omniverse. Estos cambios incluyen una nueva característica de sincronización bidireccional en vivo en el conector iClone, la adición de soporte para arrastrar y soltar archivos Houdini HDA, y también están planeando hacer que las herramientas de arte Firefly AI de Adobe estén disponibles dentro de Omniverse a través de una API.

La noticia se ha dado a conocer en el evento Siggraph 2023, donde también han presentado tres nuevas GPU RTX diseñadas especialmente para profesionales, y han introducido nuevas capacidades generativas de inteligencia artificial en el software Maya, desarrollado en colaboración con Nvidia Picasso.

Esta plataforma, que se basa en el estándar USD y es perfecta para campos como efectos visuales, desarrollo de videojuegos, diseño y visualización, fue lanzada oficialmente el año pasado después de haber estado un año en versión beta. La gran ventaja de Omniverse es que permite a artistas y diseñadores de diferentes partes del mundo trabajar juntos en proyectos en tiempo real.

Los datos se intercambian fluidamente entre aplicaciones CAD y DCC compatibles

Todo se maneja en formato OpenUSD dentro de Omniverse. Además, se han creado complementos especiales para aplicaciones como 3ds Max, Autodesk Maya, Revit, Rhino, SketchUp y Unreal Engine.

A pesar de que en sus inicios la plataforma se dirigió a una variedad de mercados, incluyendo efectos visuales y desarrollo de videojuegos, el enfoque actual del producto, según el sitio web de Nvidia, se centra más en aplicaciones industriales, como la creación de gemelos digitales.

Novedades en el conector iClone de Omniverse y soporte de arrastrar y soltar para archivos HDA

Hemos destacado las más recientes mejoras en las herramientas artísticas de Omniverse. Si desea más detalles sobre USD Composer 2023.1, USD Presenter 2023.1 y Audio2Face 2023.1, le recomendamos revisar nuestro artículo previo.

Las modificaciones realizadas en los plugins del conector de Omniverse para aplicaciones DCC incluyen la posibilidad de sincronización bidireccional en tiempo real con el software de animación iClone de Reallusion.

Versiones previas del plugin requerían que los usuarios exportaran archivos USD desde iClone y, posteriormente, los cargaran manualmente en una aplicación de Omniverse para activar las actualizaciones automáticas.

Asimismo, aquellos que utilicen Houdini podrán ahora cargar activos en su formato HDA directamente en la interfaz gráfica de Omniverse, utilizando la función de arrastrar y soltar.

Nuevas opciones en las API de Omniverse Cloud para renderizar archivos OpenUSD y programar en Python

El Omniverse Cloud, el conjunto de servicios basados en la nube desarrollado por Nvidia en torno a Omniverse, ha incorporado recientemente nuevas API destinadas a desarrolladores que trabajan en flujos de trabajo basados en OpenUSD.

Una de estas API es RunUSD, que permite la conversión de archivos OpenUSD en imágenes renderizadas trazadas. Esta función se logra mediante la validación de los archivos cargados con las versiones de OpenUSD y la generación de renderizaciones empleando el renderizador nativo de Omniverse.

Entre las API en fase de desarrollo destaca ChatUSD, una herramienta impulsada por inteligencia artificial que es capaz de generar secuencias de comandos de código Python-USD a partir de texto. Además, tiene la habilidad de responder preguntas relacionadas con el conocimiento de USD. Este agente está siendo desarrollado en el marco de trabajo NeMo de NVIDIA.

Por otro lado, se tiene en proyecto incorporar a Omniverse la suite de herramientas creativas de inteligencia artificial generativa Firefly de Adobe. Este paso permitirá que los usuarios accedan a las capacidades de Firefly a través de una API en Omniverse.