Nvidia muestra los NPC interactivos y la reconstrucción de rayos DLSS 3.5 que llegarán a todas las GPU RTX este otoño

Además de anunciar un Half-Life 2 RTX remaster en la Gamescom 2023, Nvidia también mostró algunas mejoras que llegarán a sus tecnologías RTX. Entre ellas, un modelo de lenguaje de gran tamaño (LLM) para los personajes no jugables (NPC) del juego y una importante actualización de DLSS 3.5 que ofrece mejores efectos de iluminación a través de la reconstrucción de rayos.

Nvidia ACE y NeMo SteerLM

Los personajes no jugables contribuyen a la inmersión en el mundo de un juego, pero para los desarrolladores es una tarea hercúlea programar de forma diferenciada todos los personajes no jugables de un juego. Nvidia mostró por primera vez su motor Avatar Cloud Engine (ACE) durante Computex 2023, que aprovecha la IA para dotar de inteligencia a los NPC.

ACE se basa en tres componentes principales impulsados por IA: NeMo LLM, las funciones de reconocimiento automático del habla (ASR) y conversión de texto a voz (TTS) de Riva, y Omniverse Audio2Face, capaz de crear animaciones faciales a partir de una fuente de audio.

Ahora, la compañía está aumentando ACE con NeMo SteerLM, que es un LLM que añade personalidad y emoción a los NPC para un mayor realismo. SteerLM permite a los jugadores definir y afinar la interacción con los personajes de forma similar a como se puede guiar a los LLM mediante instrucciones de lenguaje natural. SteerLM también permite a los desarrolladores que los modelos se vean influidos por los acontecimientos del mundo del juego.

DLSS 3.5 lleva la reconstrucción de rayos a todas las GPU RTX

Nvidia presentó DLSS 3 con Frame Generation, que aprovecha los núcleos tensoriales de 4ª generación y los aceleradores de flujo óptico de las GPU de la serie RTX 40. Ahora, en Gamescom 2023, Nvidia ofrece la posibilidad de incluir canalizaciones de trazado de rayos con DLSS 3.5.

Un canal de trazado de rayos tradicional muestrea los rayos en busca de reflexiones e iluminación global, que luego se someten a un proceso de eliminación de ruido. En DLSS, esto se realiza a una resolución inferior y luego se aumenta la escala. Sin embargo, el uso de denoisers, aunque esencial, puede dar lugar a una iluminación imprecisa, además de eliminar potencialmente información, como el color.

En la actualidad, los desarrolladores emplean el Nvidia Real-time Denoiser (NRD), que supone una gran mejora con respecto a la solución de filtrado espaciotemporal guiado por la varianza (SVGF) utilizada anteriormente. Los rumores indican que Nvidia incluirá un acelerador de eliminación de ruido directamente en el canal RT con las próximas tarjetas RTX 50 Blackwell.

Sin embargo, esto no son más que especulaciones, y aún faltan un par de años para que RTX 50 vea la luz. Por ahora, Nvidia pretende superar las limitaciones de la eliminación de ruido con DLSS 3.5, que incorpora la reconstrucción de rayos (RR) basada en IA.

Según la compañía, RR se ha entrenado con 5 veces más datos que DLSS 3 y es una solución superior que está capacitada para reconocer vectores de movimiento y efectos de trazado de rayos, a la vez que es capaz de diferenciar entre píxeles buenos y píxeles malos. La red de IA también está entrenada para retener información vital para generar un escalado de alta calidad.

Según Nvidia, la activación de DLSS 3.5 no debería afectar demasiado al rendimiento general del juego. A diferencia de DLSS 3.0 Frame Generation (FG), que hace uso explícito de los aceleradores Optical Flow en las GPU de la serie RTX 40, DLSS 3.5 RR funcionará en todas las tarjetas RTX.

DLSS 3.5 llegará este otoño a juegos como Cyberpunk 2077: Phantom Liberty, Portal con RTX y Alan Wake 2, y será compatible con plataformas como Omniverse, Chaos Vantage y D5 Render.