Еще немного, и у тебя совсем отпадет необходимость выходить из дома — мечта солипсистов!
Разработчики из Intel превратили кадры из компьютерной игры GTA V в реальность. Как рассказывают компьютерщики на своем сайте, они создали нейросеть, которая переводит пиксели в пейзажи. Для этого ребятам пришлось выйти из душного офиса, сесть за руль машины и снять терабайты видео, а потом учить нейросеть жизни.
Пока алгоритм работает с небольшой скоростью, но разработчики надеются, что в перспективе начнут применять его как модуль в компьютерных играх, что повысит их реалистичность.
Если тебе интересно не только видео, но и то, как все это получилось, вот немного подробностей. Авторы решили не создавать новый автосимулятор, а воспользовались GTA V, где большая доля игрового процесса проходит за рулем. Кроме кадров из игры они использовали содержимое G-буфера — дополнительного канала информации, который можно записать в итоговую картинку, чтобы в дальнейшем изгаляться над ней как захочется. Рендеринг 3D-сцены разбивается на два этапа. В первой движок рассчитывает геометрические данные и заполняет G-буфер кадрами, на которых отражаются свойства объектов. На втором движок, используя эти промежуточные данные о свойствах объектов, проводит рендеринг освещения в сцене. Непонятно, но интересно. Да и выглядит здорово.
В статье использованы материалы Enhancing Photorealism Enhancement.
