Сотрудник Nvidia раскрыл принцип работы DLSS 5
Джейкоб Фриман, специалист по DLSS в NVIDIA, в ходе переписки с ютубером Дэниелом Оуэном объяснил, как функционирует DLSS 5. Технология не вмешивается в рендеринг на уровне движка и не использует мощность видеокарты для улучшения геометрии или текстур. Вместо этого она обрабатывает уже готовый кадр и векторы движения, пропуская финальное 2D-изображение через генеративную нейросеть. По сути, принцип работы напоминает применение фильтров в Instagram или Photoshop.
Этим объясняется эпизод из трейлера Starfield, где у персонажа появились волосы там, где их не было. Нейросеть не достраивает сцену логически, а "дорисовывает" детали поверх готовой картинки, руководствуясь собственным представлением об объекте.
Одним из главных вопросов остается сохранение художественного стиля оригинальной игры. Отвечая на опасения, что Nvidia навязывает свое видение визуала, Фриман заверил, что разработчики получат доступ к настройкам вроде интенсивности эффекта, цветокоррекции, контрастности и возможности маскирования объектов. Однако, как подчеркнул Оуэн, все перечисленные инструменты являются стандартными для графических редакторов, но при этом отсутствует упоминание о возможности тонкой перенастройки самой ИИ-модели под конкретную эстетику студии. По всей видимости, логика работы нейросети остается фиксированной.
В Nvidia подчеркивают, что взаимодействие с разработчиками продолжается. Представитель компании отметил, что DLSS 5 позиционируется как инструмент для достижения художественного замысла создателей игр, а не как ограничение, накладываемое возможностями традиционного рендеринга.