Los microservicios NVIDIA NIM transforma la IA física, aceleran el trabajo basado en OpenUSD, desarrollo de gemelo digital y robótica para la industria
NVIDIA anuncia esta semana en SIGGRAPH, avances importantes del marco de código abierto Descripción de escena universal (OpenUSD), que ampliará la adopción en el intercambio de datos 3D universal para robótica, diseño industrial e ingeniería, y acelerarán la capacidad de los programadores de crear mundos virtuales de alta precisión para la próxima evolución de la IA.
Mediante la nueva IA generativa basada en OpenUSD y los marcos de desarrollo acelerados por NVIDIA integradas en la plataforma NVIDIA Omniverse, más industrias ahora pueden desarrollar aplicaciones para visualizar proyectos de diseño industrial e ingeniería para simular entornos y crear la nueva generación de IA física y robots.
Las nuevas ofertas incluyen microservicios NVIDIA NIM para modelos de IA que pueden generar lenguaje OpenUSD para responder consultas de usuarios, generar código Python OpenUSD, aplicar materiales a objetos 3D, y comprender el espacio y la física 3D para ayudar a acelerar el desarrollo de gemelos digitales. Además, los nuevos conectores USD para formatos de datos y herramientas de desarrollo para robótica y simulaciones industriales permiten que los usuarios transmitan grandes conjuntos de datos con raytrace desde NVIDIA RTX a Apple Vision Pro.
“Hasta hace poco, los mundos digitales eran usados por la industria creativa y de medios; ahora, con las mejoras y la accesibilidad que los microservicios NVIDIA NIM brindan a OpenUSD, todos los tipos de industria pueden crear mundos virtuales con base física y gemelos digitales para impulsar la innovación mientras se preparan para la próxima fase de la IA: la robótica”. dice Rev Lebaredian, vicepresidente de Omniverse y tecnología de simulación en NVIDIA.
La IA generativa llega a OpenUSD con NVIDIA NIM
Los primeros modelos de IA generativa para desarrollo de OpenUSD, desarrollados por NVIDIA, estarán disponibles como microservicios NVIDIA NIM. Los modelos permiten que los programadores incorporen copilotos y agentes de IA generativa a los flujos de trabajo de USD, y así incrementar las posibilidades en los universos 3D y ayudara acelerar la adopción de USD en más sectores industriales, como manufactura, industria automotriz y robótica.
La IA física utiliza simulaciones y métodos de aprendizaje para ayudar a los robots y otras automatizaciones industriales a percibir, razonar y navegar por su entorno de manera más efectiva. La tecnología transformará industrias como la de fabricación , médica, y avanzará en espacios inteligentes con robots, tecnologías de fábrica y almacén, agentes quirúrgicos de IA y automóviles que pueden operar de manera autónoma y precisa.
NVIDIA ofrece una amplia gama de microservicios NIM personalizados para modelos específicos de industria. El conjunto de microservicios NIM de NVIDIA adaptados a la IA física admite capacidades de voz y traducción, visión e inteligencia, animación y comportamiento realistas.
Los microservicios disponibles en la presentación preliminar son:
- Microservicio USD Code NIM: responde preguntas generales de OpenUSD y genera automáticamente código OpenUSD-Python con base en avisos de texto que pueden introducirse en una aplicación de visualización como usdview de Pixar, o una aplicación basada en el kit NVIDIA Omniverse para visualizar los datos 3D correspondientes.
- Microservicio USD Search NIM: permite que los desarrolladores hagan búsquedas en grandes bibliotecas de OpenUSD, 3D y datos de imagen usando lenguaje natural o entradas de imagen.
- Microservicio USD Validate NIM: verifica la compatibilidad de los archivos cargados con versiones de lanzamiento de OpenUSD y genera una imagen renderizada por RTX con seguimiento completo de la ruta mediante API en la nube NVIDIA Omniverse o interfaces de programación de aplicaciones.
Los microservicios recientemente anunciados que pronto estarán disponibles son:
- Microservicio USD Layout NIM: permite que los usuarios ensamblen escenas basadas en OpenUSD de una serie de mensajes de texto basados en inteligencia espacial.
- Microservicio USD SmartMaterial NIM: predice y aplica material realista a un objeto diseñado con asistencia de computación.
- Microservicio fVDB Mesh Generation NIM: genera una malla basada en OpenUSD, renderizada por API de nube Omniverse, de datos de nube de puntos.
- Microservicio fVDB Physics Super-Res NIM: realiza un proceso de superresolución de IA en un cuadro o secuencia de cuadros para generar una simulación de física de alta resolución basada en OpenUSD.
- Microservicio fVDB NeRF-XL NIM: genera un campo de radiación neuronal en gran escala en OpenUSD usando API de nube Omniverse.
Foxconn, un líder global de manufactura con 170 fábricas en todo el mundo, ya se está beneficiando de la plataforma de computación NVIDIA, usando microservicios NIM y Omniverse para crear un gemelo digital de una fábrica en desarrollo.
“Los gemelos digitales pueden ayudarnos a acelerar la próxima ola de manufactura industria y máquinas autónomas”, afirma Zhe Shi, director de transformación digital y director de la plataforma de manufactura inteligente en Foxconn. “NVIDIA Omniverse y los nuevos microservicios NIM democratizarán la capacidad de desarrollar gemelos digitales y ayudará a nuestros equipos a crear fábricas virtuales con base física”.
Los conectores OpenUSD llevan la IA generativa a más industrias
Una serie de nuevos conectores USD para formatos de datos para robótica y transmisión a Apple Vision Pro abre las puertas de la interoperabilidad y la creación avanzada con OpenUSD en más industrias.
NVIDIA y Siemens, amplían su colaboración para facilitar más cargas de trabajo industriales usando OpenUSD. Siemens integrará pipelines de OpenUSD en su portafolio Simcenter de tecnologías de simulación para apoyar toma de decisiones basada en evidencias y colaboración entre los principales interesados.
La integración permite visualización fotorrealista de alta fidelidad en tiempo real de datos de simulación complejos, lo que da una visión más profunda del desempeño del producto dentro del entorno operativo en el mundo real. El trabajo se suma a los esfuerzos de Siemens para incorporar Omniverse en su portafolio Teamcenter Product Lifecycle Management (PLM).
NVIDIA también lanzó un conector de Unified Robotics Description Format en OpenUSD, para que los profesionales de robots usen sus datos de robótica en todas las aplicaciones, incluidas las de diseño, simulación y aprendizaje por refuerzo.
Para hacer avanzar aún más una expansión del Ecosistema de OpenUSD, NVIDIA anunció el kit de desarrollo de software OpenUSD Exchange, que permite a los desarrolladores crear sus propios conectores de datos OpenUSD robustos.
Ya están disponibles nuevas herramientas para desarrolladores y API para transmitir escenas OpenUSD a gran escala desde una aplicación creada en la plataforma Omniverse a Apple Vision Pro a través de la NVIDIA Graphics Delivery Network.
Impulso del ecosistema OpenUSD
Los microservicios USD Search, USD Code y USD Validate NIM están disponibles en la presentación preliminar en el catálogo de API NVIDIA. El conector de OpenUSD a URDF está disponible con NVIDIA Isaac Sim.
Los programadores pueden comenzar a integrar la IA generativa en el trabajo de OpenUSD con las nuevas herramientas para desarrolladores de Omniverse y un flujo de trabajo de referencia para crear un canal de datos sintéticos generativos basados en IA con OpenUSD.
Conozca más sobre lo último en IA generativa y computación acelerada en las charlas del fundador y CEO de NVIDIA, Jensen Huang, en SIGGRAPH, la principal conferencia sobre computación gráfica, hasta el 1 de agosto en Denver.
Fuente: NVIDIA
