В рамках технологии DLSS 3 искусственный интеллект умеет дорисовывать кадры, а в DLSS 10 нейросеть сможет полностью заменить классический рендеринг. Таков прогноз Nvidia

Главной особенностью технологии DLSS 3 стала генерация кадров, когда GPU может дорисовывать целые кадры, опираясь на искусственный интеллект. Nvidia считает, что будущие версии DLSS смогут намного больше. 

В рамках технологии DLSS 3 искусственный интеллект умеет дорисовывать кадры, а в DLSS 10 нейросеть сможет полностью заменить классический рендеринг. Таков прогноз Nvidia

Согласно прогнозу компании, в будущем, возможно, с выходом DLSS 10, нейросети смогут полностью заменить классический рендеринг. 

Еще в 2018 году на конференции NeurIPS мы собрали действительно классную демонстрацию мира, который полностью рендерился с помощью нейронной сети, но управлялся игровым движком. Итак, по сути, мы использовали игровой движок для генерации информации о том, где что находится, а затем использовали ее в качестве входных данных для нейронной сети, которая выполняла весь рендеринг, поэтому она отвечала практически за каждую часть процесса рендеринга. Запустить эту штуку в режиме реального времени в 2018 году было своего рода провидческой задачей. Качество изображения, которое мы получили, конечно, не было и близко на уровне того же Cyberpunk 2077, но я думаю, что в долгосрочной перспективе именно к этому будет двигаться графическая индустрия. Мы собираемся все больше и больше использовать генеративный искусственный интеллект. 

Я думаю, что мы повысим реализм, а также, надеюсь, удешевим создание потрясающих сред AAA, перейдя к гораздо большему количеству нейронного рендеринга. Я думаю, что это будет постепенный процесс. Особенность традиционного 3D Pipeline и игровых движков в том, что ими можно управлять: вы можете поручить командам художников создавать вещи, и у них будут связные истории, локации и все такое. С помощью этих инструментов вы действительно можете построить мир. 

Нам наверняка понадобятся эти инструменты. Я не верю, что ИИ будет создавать игры таким образом, что вы просто пишете абзац о создании игры в стиле киберпанк, а затем выходит что-то такое же хорошее, как Cyberpunk 2077. Я действительно думаю, что, скажем, в далеком будущем появится DLSS 10. Это будет полностью нейронная система рендеринга, которая по-разному взаимодействует с игровым движком, и поэтому она будет более захватывающей и красивой 

В данном случае DLSS именно десятой версии указан просто в качестве примера. Само собой, Nvidia ещё понятия не имеет, когда выйдет эта версия, на что она будет способна и не заменит ли её раньше какая-то другая подобная технология. К слову, то самое демо из 2018 года вы можете видеть на видео ниже. 

Учитывая ориентацию Nvidia, вероятно, в каждом новом поколении графических архитектур компании мы будем видеть всё большую значимость тензорных ядер. К примеру, уже в следующем поколении соотношение обычных ядер CUDA к тензорным может сместиться относительно Ada Lovelace в пользу последних.  


Источник