OpenDLSS reimplementa la red neuronal de DLSS 5 de NVIDIA en Vulkan, bit a bit idéntica
OpenDLSS: A Vulkan Reimplementation of Nvidia's DLSS 5 Neural Rendering Network

OpenDLSS-NR es una reimplementación en Vulkan de la red de renderizado neuronal DLSS 5 de NVIDIA, con una exactitud bit a bit respecto al original. Utiliza la misma red Swin/ViT de 71 bloques que DLSS-NR build 310.8.0, ejecutando FP8 en los tensor cores. Los intermedios también coinciden: los 75 límites de bloque, byte por byte. Incluye un port independiente a WebGPU que funciona en el navegador sin tensor cores ni FP8. El usuario debe proporcionar los pesos. En una RTX 4070 SUPER, procesa un fotograma a 3840x2160 en 29,3 ms.
La exactitud está en la especificación, no en el hardware.
- Lerc
Me sorprende bastante que no tome el z-buffer como entrada. Habría pensado que eso aportaría información útil, es una de las formas de controlnet más útiles.
- TheJCDenton
> bit-exact contra el original
¿Qué clase de brujería es esta? ¡Un trabajo muy impresionante!
- tim-projects
Jensen: Ya nadie necesita programar...
Programador: OpenDLSS...
Jensen: Espera. ¡No así! (╯°□°)╯︵┻━┻
- drnick1
> Una reimplementación en Vulkan de la red de renderizado neuronal DLSS 5 de NVIDIA, bit-exact contra el original.
Bit-idéntica, juro que ya había oído eso en algún sitio antes.
- flohofwoe
Casi 8ms a resolución 1080p parece extremadamente caro, ¿el original también se come tanto del presupuesto de renderizado?
- Geee
¿Qué tipo de dataset se usa para entrenar DLSS 5? ¿Necesitan generar primero pares de imágenes sintéticas?
- binsquare
¿En qué punto este renderizado neuronal le quita el toque humano a los estilos artísticos?
- franticgecko3
¿Qué tan útil es esto sin los pesos?
¿No es acaso la baza que tiene Nvidia que trabajan con estudios para generar los datos de entrenamiento del juego, y luego distribuyen un modelo por juego?
¿O mi conocimiento está desactualizado y simplemente están usando un único modelo generalizado?