Графика, создаваемая искусственным интеллектом Nvidia на основе фотографий, поражает

playground.ru:

Если вы думали, что новейшая технология ускорения частоты кадров DLSS 3 от Nvidia была довольно хитрой, то вы, как говорится, еще ничего не видели. Позвольте представить вам NeRFs или Neural Radiance Fields, ужасающе умный метод ускоренного ИИ для создания полноценных 3D сцен из горстки фотографий.

Идея концептуально проста. Возьмите несколько 2D-изображений чего-либо. Пропустите их через некоторые алгоритмы нейросети. Рендеринг вещи или вещей - или целой сложной сцены - в полном 3D. Причем в реальном времени.

Это похоже на сканирование фотографий для создания 3D-сцен, но с добавлением искусственного интеллекта. По крайней мере, так утверждают продавцы. NeRF не являются уникальными для Nvidia. Но компания делает некоторые особенно интересные вещи с NeRFs, которые имеют отношение к компьютерным играм, а не к созданию фильмов, где до сих пор было много шума вокруг NeRFs.

Вы можете посмотреть это подробное видео от Corridor Crew показывающее, насколько невероятна технология NeRF для создания фотореалистичного видео из нескольких фотографий. Существуют даже приложения на основе NeRF для смартфонов Android и Apple, такие как Luma AI, так что вы можете сами опробовать эту технологию.

Возвращаясь к ПК, следует отметить, что помимо того, что весь этот процесс необычайно умен, он предлагает ряд непосредственных и очевидных преимуществ. Вместо того, чтобы использовать детальные 3D-модели и множество текстур высокого разрешения, требующих большой пропускной способности, для визуализации сложной сцены достаточно нескольких фотографий или изображений.

Nvidia доводит это до новых пределов, создавая так называемые "компактные" NeRF, которые требуют в 100 раз меньше данных для рендеринга сцены. Преимущества, которые это может дать с точки