En el marco de Computex 2024, NVIDIA ha anunciado la disponibilidad general de los microservicios generativos de IA de NVIDIA ACE, destinados a acelerar la próxima ola de humanos digitales, así como nuevos avances en IA generativa que pronto estarán disponibles en la plataforma.
Empresas en los sectores de servicio al cliente, juegos y salud son las primeras en adoptar las tecnologías ACE para simplificar la creación, animación y operación de humanos digitales realistas en diversas aplicaciones, desde el servicio al cliente hasta la telemedicina y el entretenimiento.
Tecnologías disponibles y nuevas innovaciones
La suite de tecnologías generativas de humanos digitales de NVIDIA ACE ahora disponible incluye:
- NVIDIA Riva ASR, TTS y NMT: Para el reconocimiento automático del habla, conversión de texto a voz y traducción.
- NVIDIA Nemotron LLM: Para la comprensión del lenguaje y generación de respuestas contextuales.
- NVIDIA Audio2Face: Para la animación facial realista basada en pistas de audio.
- NVIDIA Omniverse RTX: Para la representación en tiempo real de piel y cabello con trazado de rayos.
Además, se anunciaron nuevas tecnologías como:
- NVIDIA Audio2Gesture: Para generar gestos corporales basados en pistas de audio, disponible próximamente.
- NVIDIA Nemotron-3 4.5B: Un nuevo modelo de lenguaje pequeño (SLM) diseñado para inferencia de IA en PCs RTX con baja latencia.
Impacto en PCs RTX AI con NVIDIA ACE
Hasta la fecha, NVIDIA ha proporcionado ACE como microservicios NIM para desarrolladores en centros de datos. Ahora, NVIDIA está construyendo microservicios NIM ACE para PCs, disponibles para los 100 millones de PCs y laptops RTX AI instalados.
Estos incluyen Nemotron-3 4.5B, el primer SLM de la compañía diseñado para funcionar en dispositivos con niveles de precisión similares a los modelos de lenguaje grandes (LLM) que operan en la nube. Nemotron-3 4.5B SLM ya está en acceso temprano, y Audio2Face y Riva ASR estarán disponibles pronto en acceso temprano.
El nuevo kit de desarrollo de software NVIDIA AI Inference Manager simplifica la implementación de ACE en PCs, preconfigurando el PC con los modelos de IA necesarios y gestionando la inferencia de IA de manera fluida entre PCs y la nube.
Demostraciones y adopción de la industria
En la feria COMPUTEX, se presenta una versión actualizada de la demostración tecnológica Covert Protocol, desarrollada en colaboración con Inworld AI. Utilizando Audio2Face y Riva ASR operando localmente en PCs GeForce RTX, la demo permite a los jugadores interactuar y influir en personajes no jugables (NPCs) digitales-humanos mediante lenguaje conversacional.
ACE está siendo adoptado por desarrolladores de diversas aplicaciones de empresas como Aww Inc., Dell Technologies, Gumption, Hippocratic AI, Inventec, OurPalm, Perfect World Games, Reallusion, ServiceNow, Soulbotix, SoulShell y UneeQ.
Por ejemplo, Aww Inc., una empresa pionera en humanos virtuales, planea utilizar microservicios Audio2Face para la animación en tiempo real, mejorando la experiencia de comunicación con sus usuarios. Perfect World Games adopta ACE en su demo tecnológica Legends, permitiendo a los jugadores interactuar con un NPC multilingüe, generando animaciones faciales realistas en tiempo real.
Inventec está utilizando Audio2Face para mejorar su agente de IA en el ámbito de la salud, proporcionando una experiencia de consulta virtual más atractiva y reconfortante. ServiceNow ha demostrado el potencial de los avatares digitales en la mejora de interacciones en diversos sectores con su agente de servicio de IA generativa.
Celebración de Startups de humanos digitales con NVIDIA ACE
En COMPUTEX 2024, NVIDIA destacó el uso de herramientas de IA generativa construidas sobre ACE para crear un avatar «digital Jensen». Utiliza tecnología de voz y habla AI de ElevenLabs en mandarín y inglés. Además, NVIDIA colaboró con Voicemod para componer la canción final del discurso principal de Huang.
Disponibilidad de ACE NIM
Los microservicios ACE NIM para despliegues en servidores, incluyendo Riva y Audio2Face, están ahora en producción. Los desarrolladores pueden registrarse para obtener acceso temprano a los microservicios ACE NIM que operan en PCs RTX AI.
