NVIDIA DLSS Transformer Model официально вышла из стадии бета-тестирования

NVIDIA DLSS Transformer Model больше не в бета-версии

Изображение более высокого качества для супер-разрешения и реконструкции лучей.

На выставке CES 2025 компания NVIDIA представила обновление для своей технологии глубокого обучения Super-Sampling (DLSS), которое получило название DLSS 4. Это обновление включает несколько усовершенствований, таких как прогресс в алгоритмах реконструкции лучей DLSS Ray Reconstruction, суперразрешении и антиалиасинге с использованием алгоритмов шумоподавления (DLAA). Примечательно, что впервые для реализации в реальном времени была использована трансформерная модель из индустрии, согласно NVIDIA.

Как заявила NVIDIAA, ранние версии DLSS в основном использовали сверточные нейронные сети (CNN) для генерации пикселей, сосредотачиваясь на конкретных областях текущего и предыдущего кадров. Однако компания обнаружила, что возможности CNN были исчерпаны. Простым введением новых профилей масштабирования уже недостаточно для дальнейшего прогресса.

Последняя модель Трансформера превосходит CNN по сложности и включает в два раза больше параметров по сравнению с предыдущими моделями повышения разрешения Deep Learning Super-Resolution (DLSS). Заметно, что эта модель больше не фокусируется на конкретном локализованном контенте; вместо этого Визуальный Трансформер анализирует всю сцену, оценивает важность каждого пикселя и учитывает их релевантность между несколькими кадрами.

Насколько я вижу, NVIDIa утверждает, что модель Transformer предлагает более глубокое понимание визуальных сцен. Это приводит к более стабильному выводу пикселей, минимизируя мерцание и подобные искажения, уменьшая ореолы, улучшая детализацию при движении и обеспечивая плавность краёв изображения. Кроме того, это значительно повышает качество изображений Ray Reconstruction, особенно в сложных условиях освещения.

После примерно полугода бета-тестирования, NVIDIYA укрепила основу для будущих улучшений и повышения качества изображения. Более шести лет использовались сверточные нейронные сети (CNN) вместе с суперсэмплингом глубокого обучения (DLSS), и вероятно, что подход на основе трансформеров будет продолжаться около такого же периода времени, постоянно развиваясь.

Смотрите также

2025-06-25 12:48